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十 多 年 来 ， 作 者 讲授 非 线性 最 优化 ， 对象 是 工程 和 商业 ` 
行政 系 科 的 大 学 生 ， 研究 生 和 进修 生 。 这 一 蜡 材 本 质 .上 涉及 
到 许多 学 科 ， 但 还 没有 一 种 共 认 的 理论 ， 在 这 许 各 有关 学 科 ， 
中 ， 有 些 学 科 有 性 质 十 分 不 同 的 多 种 数学 理论 体 京 ， 共 础 在 . 
微 积分 ， 但 也 涉及 许多 返 代 的 理论 成 果 ， 有 大 量 的 、 种 类 繁 
多 的 计算 算法 以 及 理论 .计算 和 应 才 的 无 穷尽 的 专门 例子 。. 

我 们 的 目的 ,是 在 不 要 求 广泛 的 数学 预备 知识 的 前 所 下 ， 
将 这 些 各 式 各 样 的 材料 组 织 在 一 个 引 论 性 的 教程 中 。 为 了 达 ， 
到 这 一 目标 ， 开 始 时 我 们 使 用 过 各 种 现成 的 教材 ， 以 广泛 的 
注释 、 例 题 和 习题 作为 补充 。 在 教学 过 程 中 ， 这 些 补 充 材 料 
逐渐 取代 着 教材 ， 而 教材 则 逐渐 降 到 补充 材料 的 地 位 ， 最 后 
产生 了 初步 满足 我 们 需要 的 这 本 教科 书 。 — 

本 书 的 主要 目标 之 一 ， 是 通过 广泛 地 使 用 例题 、 示 例 性 
的 题解 和 附 有 答案 的 补充 题 ， 使 读者 对 于 非 线 性 最 优化 问题 
的 提 法 和 解法 有 直观 和 深入 的 了 解 。 

在 这 本 教科 书 中 。 我 们 对 于 组 成 非 线性 最 优化 课题 的 大 
密 数 主要 领域 ， 提 供 了 一 个 简明 的 讨论 。 这 些 领 域 包括 : 

源 自 微 积分 的 古典 无 约束 最 优化 方法 ， 

使 用 Lagrange 乘 子 加 进 约束 项 而 产生 的 鞍点 

Kahn-Tucker 理论 ， 对 偶 福 ， 以 及 它 与 古典 方法 的 联 : 
系 。 

一 维 搜 索 算 法 和 计算 结果 。 


. i - 


约束 和 无 约束 问题 的 梯度 搂 索 算法 . 

ЖЕ ТЇ РА ЖЕЛИН НЯ Е. 

ЗЕ PER HERO ВСВ. 

有 二 Айва уру 的 专门 理论 和 计算 广 
4k. 

A ЖЕ Ж ЖПК ЖЕТЕ ШЕ, 

УНО ВОВ ЖЕП, 

EA BANH MAS. 

АК: [БИШ HEURE жо, 

ЭМ, ВНЖ 122 个 例题 153 道 示例 性 的 附 有 解答 的 习 
Tin 136 Ем, 补充 题 的 答案 附 在 书 的 最 后 

本 书 肉 稳 的 这 一 取 人 将， 是 想 允 过 非 线性 最 优化 理 浴 基础 
的 研究 ， 与 实际 要 求 获得 计算 解 这 江 者 之 间 找 出 一 个 适当 的 
ХЗ, ЖЕЎ, ХАЛЛЕ, ИЖЕ 
№, ВАЖЕН. qM WE 9 3 
十， 达到 使 读 考 对 从容 直观 而 深信 地 了 解 。 这 些 例 子 和 有 解 
答 的 习题 作为 一 种 手 筑 ， 用 以 扩展 在 各 章 中 只 简要 讨论 过 前 
内 容 ， 以 及 使 用 那些 材料 去 求解 有 关 的 回 题 ， 

我 们 柱 本 书 可 以 用 作 关 于 非 线性 最 优化 课题 的 介绍 性 的 
教科 书 。 除 此 之 外 ， 它 也 可 以 作为 更 高 级 的 非 线性 最 优化 教 
程 的 一 个 有 用 的 补充 ， 炎 量 的 例子 和 有 解答 的 习题 对 于 学 生 
和 教师 都 是 有 帮助 的 。 

ТЕ ШИН РАГУ ҮР ЕЛЕ ВЫ, RETE, {ш 
们 帮助 形成 了 本 书 ， 并 且 为 许多 已 解 的 习题 和 例题 付出 了 劳 
动 。 转 别 要 提 到 以 前 的 助教 .Bansal 博士， 对 他 杰出 的 如 
力 致 以 谢意 。 David A. Wismer 

R, Chattergy 
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第 一 章 - 最 优化 问题 


在 可 能 的 条 件 下 ， 如 何以 最 好 的 方式 做 事 和 nima 
JE Ber S I SE, ROS E, 癌症 的 这 种 解决 办 法 是 人 们 十 
秀 想 徘 到 多 ， 近 年 来 受到 越 来 越 大 的 重视 。 当 然 ， 很 久 以 来 
数学 家 们 就 在 研究 求 得 最 优 解 的 方法 ,或许 旱 在 Descártes 
和 Fermat 就 开始 了 ， 他 们 在 十 七 世纪 ， 甚 至 在 Newton 建 
УЖО, ИРАНЕ, 

最 优化 问题 的 解 如 果 不 随时 间 变 化 ， 由 称 这 类 问题 为 静 
栾 最 优化 或 厘 线性 规划 。 一 个 非 线性 规划 问题 ， 用 一 组 代数 
方程 或 超越 方程 来 描述 ， 这 组 方程 称 为 数学 模型 ， 或 简称 为 
措 型 。 问 题 的 解 当 然 习 权 对 于 它 的 模型 来 说 是 最 优 的 .因此 ， 
对 于 一 个 实在 的 菜 统 ， 为 了 能 得 到 近 于 最 优 的 解 ， 或 者 甚至 
仅仅 为 求 得 可 用 的 解 (常常 是 如 此 )， 所 取 的 模型 必须 密切 地 
近似 真实 系统 的 性 能 。 

При {ЕЕ КЕ ИЕН ПЕПЕ ЖЕН АТ, ШЕН 
AEN БЕТЕ ЖЕНЕ ЕНЕРШЩ, 4 ERNIEUNH 
标 函 数 都 是 线性 式 时 ， 就 是 线性 规划 问题 

如 果 最 优化 问题 的 解 是 时 间 的 函 散 ， 则 丈 这 类 问题 为 动 
寒 最 优化 ， 这 时 ， 同 题 的 数学 模型 ， 最 常用 一 组 微分 方程 和 
一 个 目标 男 数 姐 成 ， 后 者 可 以 是 一 个 积分 。 描 述 这 类 问题 的 
解法 的 数学 理论 ， 从 几 个 征 此 相 客 的 观点 发 展 起 来 ， 产 生 了 
ЖОПА, БМ, DAR Pontryagin КН 
Я. ЖШН BERE, АРЕН T: ER EE By 


a 1 + 


点， 动态 最 优化 问题 Г HE SER EE Al C CL DR TOL SÉRIE, 

对 于 大 多 数 有 实际 意义 的 最 沉 化 问题 ， 它 的 解 必 须 满足 - 
描述 该 实在 系统 的 模型 中 所 给 出 的 限制 ， 并 且 使 目标 西数 
到 值 最 大 或 最 小 。 这 类 问题 ,, 对 静态 和 动态 两 种 情形 ， 均 称 
为 约束 最 优化 问题 。 约 束 问题 中 ， 系 统 的 数学 模型 代 Ж) 
束 。 接 照 各 约束 式 中 是 出 现 等 号 (二 )、 还 是 不 等 号 ( 尖 ， 志 ) 
Жз ИЕ В а ЖА. ЛЕНИ 
CERESUDELMEUGTIE ITI MEET: vs 
化 问题。 - 


一 、 数学 预备 知识 


在 开始 叙述 正文 之 前 ， 先 规定 一 些 记号 ， 并 且 给 出 某 些 . 
数学 预备 知识 。 | 

ААТ СЛ аре а EGET TEE T E 
ЗЕЯ, GRAL COR ЛВ, x ML 
ДЖИН n AEG, МИ, | - 


VR, 
xT—[x,, Хо" а | 
如 果 需 要 指出 了 是 不 正 一 次 可 逢 的 ， 将 专门 指明 。 如 果 x E: 
ЕВЕ, АТ Ей. Wix, ху 或 
хх 是 一 组 特定 的 数 。-- 般 地 说 ， 我 们 保留 
xX*# 用 来 代表 最 优 解 。 
027 


(Cua Г 
f, ВЕ", HO GR. ЕЕ", МАНИ É Ж 
ADU CE УТЕ ЕШ) RUE ЕГИ КЕЕ 规则 都 15 
№, HERTE 中 任意 二 向 量 x 和 y， 有 用 下 式 定义 的 距离 
Их—у Gn y EG a (и уа)! 
ЖЕ" Jon 维 欧 氏 空间 @。 当 y 关 0， 有 


ШЕ Е EEH 
ж x 的 范 数 或 大 小 。 | 
如 无 特别 指明 ， 则 x c E^. EC AXES Е 
T, E: 是 我 们 生活 于 其 中 的 空间 等 等 。 对 于 #2>3 的 情形 ， 
.EE" 较 难 想象 。 。 О | 
两 个 向 量 xe E". yc E" 的 内 积 ,( 或 点 积 )， 有 是 将 它们 的 
对 应 元 素 相 胰 后 再 相 加 所 得 的 标量 ， 邵 


ху Ya LIP 


部 果 二 问 量 前 内 积 为 零 ， 即 x2 一 0， 则 称 他 们 是 正 变 的 。 
由 内 积 和 欧 氏 范 数 的 性 质 得 知 , 对 于 任意 的 Ky E* 有 
ou xn ТУ! 
ЗОНЫ НЕ may RY, сяр, 这 :~ 重要 的 关 


系 式 称 为 Schwarz Pd Ss. 
HERAK, ха, “xo ЕЕК 


т 


DOE 


izl 


(DRE EE fe P he Xa ye ие 


NERE а, m0, f—1, 2, 0 BUE k E IER 
f. . 
线性 向 车 空间 ET 中 的 身 量 集合 S， 如 果 (1) 的 所 有 
НЕТ, (2)E" НИ ТН м P: S th 
各 向 量 的 线性 组 合 ， 则 称 S 是 互 "的 一 组 基 。 

— B E er, MEE" 中 的 任 一 向 量 都 可 以 表示 成 该 
集合 中 向 量 的 线性 组 售 ， 则 称 它 生成 向 章 空 间 ET. ИМ, 
ВЕ x = (1, 0,9) , Ха (0,1,0) , xx= (0,0, 1) , Ж 
х. (1,1,0) Е, FERE 2, НЯ, КАЙ 
ЕЛИ #8, MEERE. 

2. 凸 性 ”三 集 和 西光 数 的 概念 在 最 优化 中 是 特别 重要 
的 ,为 了 建立 这 些 概念 ， 我 们 首先 定义 宣 线 ， 

过 E" 中 二 不 同 点 x+ x, 的 直线 定义 作 和 集合 

Х= {к хех: + (1-А)х:, ВНА}, 
Koh A EHE AR ОА ХЕХ, 和 x nfi. 


Jic: 在 图 1-! 中 给 出 了 当 x c E: Hj, ЕЖ {Т ХХ. 


A 


і” 
' 
i 
t 
1 
E 
1 
à 
т 
[| 


= 4 °: 


—4A E Xn. 

集合 芋 ， 如 果 对 于 其 中 的 任意 二 点 xi Hx, 连结 两 点 的 
б БЕ ЮА, Хр. 

11-2 图 1-2 中 to)、 (3) 所 给 出 的 两 个 集合 Z RD, 
(e). QDREI RACER RN, 


图 1-2 
E" 中 的 超 平 面 定义 作 下 述 点 集 
X = {х|еТх=д} 
jJUBcAQO, ЖП ЩИ, z 是 常数 。 一 个 超 平面 将 E" 分 着 
яя Нем, Bi | 
X-(x|le?x2az) 和 X=( e" xaa} 
SFEAR. Хе. 
#11-5 超 平面 - | 
Х={х 2x, += 3} 


HE AFZAL” MX: MA3 ето, RI n 


| ў Bp i- "A 

[R] 在 E* 中 给 定 超 平 面 c"x 二 z， 沿 量 七 称 为 该 超 平 
面 的 法 向 量 。 这 就 是 说 ， 向 量 < 正 交 于 该 超 平面 肉 的 任意 岗 
8. 


11-4 对 于 超 平面 及 二 {x| 一 2x1 十 xs 二 0}， 


[ү J ENT 
erx=(1)(—2)+(2)X1)=0 
ГЕЯ са, ДЕ). 
[№] ЗИЛ, пах, +} 
оля ди, Же, eTw—z, 3 H. X 
BS BUS AUS ВАР Лия, ПАУ 


* 6 ` 


М 14 
НХ н Н ЕД8], ви, УТ Ву хє X. 
etym, КЖ, ЖЕТОНЕ х ЄХ, сх. 
例 1-5 ДЕ", ShfRDUG PERDE E R ik EZ IE IB 
界 点 的 切线 ;在 BE? 中 , 则 是 在 某 个 边界 点 的 要 平面 ( 见 图 1.5)。 


X; 


B 1—5 


[№] к f(x}， 如 果 对 于 E* 中 的 的 集 革 的 任意 二 点 
X; 80 x, УРА A, 0<А<1, DH 


РАХ MOT AIOsAfGJ)TG-T2)012 


RS f(x) dX Einmal. 

AAA РЖ, мох, к, 时 ， 威 立 严 格 的 
Же, ЖА ера фу Ву. 

ж, КБ Ы, РАНУ ЯГЫ Е ЖШ. 
Арав E" 中 既是 西 的 又 是 四 的 。 但 它 既 不 是 严格 
ИН, ВЕР, 

91-6 考虑 如 图 1-6 7—72 Ж, HTAA, 
KAKI, ЖЕНЕ LAG. fou (хь, К, 
Ву г, мнит, PEE, CAER. 


fF) 


DU АХО А-ГО) 
он, КОХ. ВЫ DUE JE CU OL) ei 
(meg т, AATA RERE асе (6 Эл уң м 


例 i-7 дал, BR f(x) 是 西 的 ， 而 一 xz) XM 
By. Pu ERE FC PAL АМА Ux ts Е D ER — f(x BERE 
к, ERRATEA НИ Е, ПУ minf(xy 
一 max[ 一 A{X)j。 这 一 命题 在 一 般 情形 也 成 立 。 

с [AE] 注意 ， 同 函 数 的 定义 中 仅 要 求 隙 数 在 一 凹 集 上 高 
хх, ИЖЕ, ВЕКИ, 

可 答 函 数 了 (x) 的 梯 谋 是 由 偏 导 数组 成 的 # 维 向 量 


УР, 01 0), е, 20) 


= 


Bur. 


如 时 天 xX) 还 具有 二 阶 偏 导数 ， 其 Hesse ШЕШ ГЛ 


ЖОШ nx КЕ | 
cO fiy Ëf (yy. xt --00] 


| | дх\ à* |дх 
но д quy DT a ( 
(0 | дхудх (х) oxi o9 ÒX Xa ) 
0% òf òf 
‚ дх„дх 00 ERIP eo дх ©) 


н (x 的 对 称 性 由 混合 偏 导 数 与 求 导 的 次 序 无 关 这 一 事 实 Е 
Н, H) 
df Of 


——. = —. 


FEF OX;  Ox,0x, 
MR ч EE" hiya yi ОНЫ] ч =1), WA Кх) 
8] 方向 导数 定义 作 
а f(x) -—Jjf(X)*u 


lim 


AONTAS RECEU к EARNERS, 
91-8 хе, y MERI Hy ЕЙ 


m= [i 上 的 方向 导 到， 


i, j=l, 2ye, п 


[#1 VjG, у)= м нука) 


ЖЕУ НЕЕ, И, К. ВП 
Жа! pd, "m 


us= -t |l] 1/410 
idi СМИ 3 т 3⁄.Z10 


现在 MW=w ОИСИ) =, 在 :一 1，3% 一 ! 处 
0027 ЕЕ Е 


VJ(1,1)7u= ADHD) T 
在 最 优化 问题 中 ， 一 类 重要 的 函数 是 二 次 和 型。 一 个 二 次 
-型 是 一 个 4 元 孙 数 ， 订 以 写作 如下 形式 


fo ў "m X, Ж, 


$21Jjz1 


其 中 oy jy 是 常数 。 用 和 矩阵 一 一 测量 记号 ， 读 二 次 型 可 以 写成 
| х?Ах 
HapA[e,,], #пхп ЖЕ. EEE AR 这 一 组 
TEL LI Йй, 
例 1-9 КАЖ 
(а) умах, (b) xix 2 dr: 2х, 
(c) xi-c2xic3x2, Ж ШӘ ЁЛ ЕхТАх, ХШ 
1 0.5 2 
0.5 0 1! 
0 


2 2 


c) al] 9 a= 


1 0 0 
0 0 3 | 
АВЕ АУЕ ВО. НЯ, ЖЖ ЖЕ, АШ. 


可 以 取 作 是 对 称 的 ， 
1-10 在 例 1-9(ey 中 ， 形 式 如 


1 b 
A-| 。 ‚| 
的 任意 一 个 和 矩阵 表达 式 ， 只 要 潢 足 8 十 5 二 1!， 者 能 准确 地 x 


示 卉 这 一 二 次 殷 。 从 满足 上 述 条 件 的 无 限 多 个 短 阵 中 ， 我 人 
总 可 以 选取 对 称 和 矩阵 . 


其 中 бо. 


«1 


ГЕ) ОА x"Ax, МАЯ p Fx, AGE OXON 
xT3,9o0—x,2:0)/5, #8 x" Ax20, И XE E XE RESO, 

如 果 对 于 每 个 X， 有 xTÀx 20, НЫЕ xv, E 
x"AX—0, КА НЕ, | | 

只 要 反 转 有 关 不 等 式 的 方向 ， 可 以 类 似 地 定义 负 定 和 半 
ñ=. 

ЗАУР x Иже, WEFR- 
些 x 什 又 屁 负 的 ， 则 称 二 次 型 是 不 定 的 。 = 

Bii 判别 使 二 次 型 ?一 x?Ax 为 正 ， 为 负 的 区 域 , .并 
确定 二 次 型 的 类 型 。 | 


| [R] 所 图 1-8 知 ， 
(a) z=x)+ xP ВЕН, Их, 44770 {ИНЖ 


外 ，z 都 是 正 的。 | 

(b) ааа, ШАКЕ Ex, = — x. 
时 2 二 0) 外 ，z 都 是 正 的 。 

(c) ге=х}—хї} ERU, М xpo [xal ZE 
ËJ, Пак, zÆ, 

з. ЖАЫ GDTHUREÉRIQO, TUATA 


a 12 + 


ЕЯ ТАНУ ME, 
定理 1-1 РОО) Е" 上 的 可 微 函 政 .那么 ， 
了 (和 在 互 上 是 廿 的 ， 当 且 仅 当 对 于 任意 的 x+: 、x*E 耳 ， 部 有 


fd) TA) | 


ERI E (x) JF EXC К” БАКАН, 
ЖА, food Хам, НИЯ талхе, Hesse Xi 
БЕНО) Bt EE IE 0, 

定理 1-3 ая са" E CCS E. 如 
JEXDTARTXC€X, Hesse AREER, WA E XE 
EFRON, их SHEERA, нах. 

4. Sylvester 定 理 为 了 确定 一 个 二 次 型 是 不 :是 正定 
药 ， 可 以 用 下 述 定理 。 

Sylvester 定理 二 次 型 xrHx 是 正定 的 ， 当 旦 权 ЩН 
БЕН БЕГДЕ ЖР эКИ ЖЕЙ. 


Wi FF SL N ЖЖЖ BS MS K BE A X S ЭППИ 
的 子 方 阵 的 行列 式 。 一 个 nxn EER n ТРЕ А. 
Я, ШЖ 
ET his Б 
H-| has Наз hag 
Lgs Ваг h 
那么 这 三 个 主子 式 就 是 下 面 三 个 行列 式 
P " | EZE " his | 
H 12 DEP 21 бәз} | 
lha hez! ” DT LIT has | 
ЖЖ АЯ! HREH, ЖЕ? x Hx 是 负 定 的 .由 于 
+019 


| 
J. 


33 


hi, 


—x*Hx—x'( —H)x 


可 以 对 一 H 使 用 Sylvester 定 理 以 确定 H 的 负 定性 。 

仅仅 用 所 有 须 序 主子 式 非 负 (>>0) 代 № 为 正 (>0)， 不 : 
能 判定 一 个 矩阵 是 不 是 半 正定 的 ， 必 须 所 有 的 主子 式 都 是 非 : 
负 的 ， 才 能 得 出 矩阵 是 半 正 定 的 。 要 使 用 这 一 判定 条 件 ， 必 
须 对 所 有 的 p=1，2 ,…,n, 计 算 所 有 可 能 的 (”) 个 了 阶 主 - 
子 式 ， 这 中 不 大 可 能 做 到 的 。 对 于 实 对 称 拭 阵 ， 如 果 其 序 主 - 
子 式 都 是 正 的 ， 那 么 所 有 的 主子 式 也 都 是 正 的。 一 个 矩阵 不 : 
是 正定 前 、 负 定 的 、 半 正定 的 或 半 负 定 的 ， 则 是 不 定 的 。 

1-10 确定 下 列 各 矩阵 的 正定 负 定 性 质 ， 


[NU (а) 
2 1 2 
Zr зо 
.2 0 5^ 
[2 1 2 
| 
А 2 lice i—g! 1 3 О = 
1:22 3 | 
l2 o 5 


(2 rar 
6) H= 1 — 0 
L2 0-5. 
2 * 2| 
h=? |2 ттт» [ —3 0 47 
1—3 | 2 0—5! 


НАЕ. ЖЕ-Н, 


所 以 H 是 不 定 M. 
二 、 非 线性 规划 


现在 将 以 后 各 章 中 要 考虑 的 非 线 注 规划 问题 定义 如 下 ， 
minf(x) 


" (0-9 i-i, 2,2-,m«n 
E Ахуро јет, 2,=-, r 
其 中 X 一 [xi， хаха], ВБИ а. St. в, 都 是 可 微 
的 。 搞 名 话说 ， 我 们 希望 从 满足 m 个 等 式 约束 
g,(x)—0 i21, 9, -m,«n 
ИЛА 
h,(x)2m0 j=1, 2, "5r 
的 所 有 x EB. ТОТ, 
因为 问题 的 解 可 以 不 是 唯一 的 ,)[x3，x,…，x*]”， 它 使 
FOORE DA., HER, ЗАК т ЖЕ 
НТА n. WE тшеп, ESI ERE DRESSER. 的 (overconstr a 


> 15 ° 


ined)， 因 为 这 时 已 经 没有 为 了 最 优化 而 选择 解 的 让 内 度 , ЕР 
由 度 的 数量 由 pn 一 名 给 出 。 

满足 全 部 约束 的 所 ША: BIS, Я ERT 47 й. 
可 行 集 的 任意 元 素 称 为 可 行 点 。 

Ei E Х AE E P LE E] ВЫХ RE EIE SEE. — В 
ix— L BJ P| NE S X]. Жр КДА ЖЕ vio ҖЕ 
中 ， 而 和 不 是 从 实数 点 集中 选取 解 ， 这 将 在 第 十 一 章 中 讨论 ， 
айй, Иная, ИЯ 
一 些 . 

没有 约束 、 或 只 有 等 式 约束 、 或 只 有 不 等 工 约 束 千 特殊 
TD. 也 称 为 非 线性 规划 问题 。 

例 1-15 ЯР, 


min(z,—2)* 4 (z,—2)* 
#1:=; 
В х,+2х,=4, 4,20, х.20 


ВИНТ TAR, RUM Hr 742,70, ха20 
Hirn Пе. НЕХ МОРЕ 


Е={ (л, хз) х 3- 2x37 4, Xx 0, x20] 


[R] RB BEA Revel curves) ik 
可 以 深入 考察 二 维 最 优化 问题 。 这 时 的 等 值 线 族 是 会 参数 的 
ка, КН Е, BER E WR f(x.. x.)8D EC 
t, 该 常数 信 ЕЛЕ, yE 
ETE x =k k=k;, kare 
RE Met m - i а 
911-14 例 1-13 的 等 全 线 画 在 图 1- tot, 


ED 1-10 


нева вита, ант 
诈 二 维 最 优化 问题 。 | 
1-15 图 !-11 给 出 了 例 1~13 的 图 和解。 问题 的 解 是 在 可 


* 17: 


яна RACES SECUS Ef SR, ЖУРН ЖЛЕ: 
fé ERREUR E, Вет 8/5, xi-8/5; Bini 
ЗС АМ 
* 8 _ 2 8 _ а 
fixi, xi)-k -(i 2) +(%- 2) = 


[Wi 前 边 已 经 计 论 过 如 何以 一 1 乘 1(X) ,将 任意 一 个 
求 极 大 的 问题 转化 为 求 极 小 的 问题 。 因 此 ,不 类 一 般 性 ,可 
以 将 非 线 性 规划 问题 作为 求 极 小 问题 来 考虑 ， 


*› 
^ 
AC 
É 4 £ .2 
‚ 
| ч 
р | 


Я 1-11 


在 不 等 式 约束 为 
h,(x)«0 j=l, 2r (1.17 


CHE, ЖИЛА ЗИ, RITE HE XS "ERE Ж 
А”. тя, (ПАЯ 
. 18 * 


—h,(x)z0, j-12,-75,f 
BHEE, 研究 如 本 段 开头 所 给 (标准 形式 ") 的 问 B, HH 
遍 意 义 的 。 
xb, “标准 形式 "可 以 通过 将 每 个 等 式 约束 写作 两 个 
不 等 试 的 约束 米 加 以 简化 ， 因 为 只 有 同时 满足 
g(G3)970 和 9(х)0 | 
BJ ЖИИ, 290) =0, TE, т 
g (x)=0, {==4,2,+,т 
可 以 用 2m 个 不 等 式 
g,(3)220, f=1,2, *,m 
—gi(x)zm0, i—1,2,"*,m 
ЖА, BFR ЗЕТЕ МИЯ CRT UA SS E 


minf(x) 
HE g (x) i=1, 2, ++, men 
E 20 А 
IG) ТУ usr 


日 是 ， 由 于 处 理 等 式 约 束 和 不 等 式 约束 问题 的 方法 (理论 的 
和 计算 的 ) 是 不 同 的， 所 以 我 们 限于 讨论 在 本 段 开头 所 给 出 . 
芍 那 种 形式 的 非 线性 规划 问题 。 
91-16 约束 
8- 一 1 一 0 
: 反 有 的 一 个 解 是 x* 二 0。 它 可 以 通过 求 下 列 琴 个 可 行 集 
` 19 + 


в. = x| 2-2 — i20] 


F,-[4 -g *+ 1220] 
的 交集 而 得 到 、 或 者 


如 图 кы P ={х«<о} n [xol =| 0 } 


=, 线性 规划 


上 -~ 忠 的 非 线性 规划 问题 ， 最 重 襄 的 特殊 情形 是 线 伺 孝 
МЕ, Жтт, | 


min 
=; € 4X 4 


danl 
Hs a 
| Yo niet imi, 2, *=, m 
11 
Б 1=1, 2, .., n 
或 者 用 向 是- 矩阵 记号 


minxc?x 
x 


. 20 * 


H£ 'Ax«b 
~ X20 vo m oma 
Ehei ан Е, Бана, AE mxmüm, 
91-17 + ЕНИ 


min? x, 4x 
Barm, 2 


BE х, taris 
| x +zx,= 6 

| 2X + X 2.10 

3,220, x,2z0 


Ш-1їз врата, ЗЕНИТ, 
BOE ЭШЕ ЖЛЕ НН. ` 


X; 


图 1-13 - T 


习题 与 题解 


数学 预备 知识 
1-1 用 定义 直接 证 明 x* пп, 
[№] /(х)® гй, SED 
О A) ) АЈС) 0А) Сх) BET 
ОА ЗЕ Р(х) хоруу, АШ 
[Ax;F(ü1—A)xi] x Axi-c(1—A)xi] ВТР ОАФ 1 
JE. М, 1780 
—A(1—2)x1--2A(1—2)x144—A(1—4A)51 27 
或 者 A(1—A)(, —x,)2220 
ЯЗ бод, BARACÓ—A)mA- A, ВТЕ] 
ОАА) ЧЕД. 因此 有 
AGAS a — Ox! 
1-2 考虑 二 次 型 а, х) 二 Xi 中 2%1%2 +312, 
(a) 写 出 它 的 和 矩阵- 向量 形 式 。 
(b) Жр RS RET 
(c) XEBEf(x, ,x;) 是 正定 的 ， 
(d) f(x, xi) Du nis 
(е) 求 在 (2，1) 点 的 支撑 表面 方 得 。 


[W] (a) Их, х) =, xil 1 J W 


i 1] 
(b) del | 3 — UB EE ERE THES. 


(с) Р, ym Gn Hata) 2л, RUE BECA Bg 
(x,, w,)=#05 8 f—0, DTI f ЖЕЕП, 


. 22 * 


(d) ЕП. ВНЕ САМ ЕР t hl, 
所 以 了 是 凸 的 ( 见 题 1-3)。 


(е) 在 zs UU TA AER ERU pes 
z—29 [Vf Gu) (x— x) 
本 题 中 
23 
x | #=Ёбх,)=4+444=11 
2x; T 2x; ` 6 \ 
УИ, = ы 2X1 T 655 l; Ni "LJ. 
z—6(x,—2)410(3,—1) 11 - 
或 :—6x.q10x,—11 | 
1-3 йж д Еш K, 
(а) а=ху+{?х},‚ _ (e) з= х 
(b) z=% £z, (d) z=xi+ ха 323 


[MO 要 使 2 是 二 次 型 ， 它 必须 能 写成 


HÉR. 


z—x*Hx. 


ба) 未 是 二 次 型 ， 因 为 它 对 а, 是 一 次 的 。 


о 17 


2 
(5) 是 二 次 型 ,， H=| | | 
至 0 


(c) 是 一 次 型 ,，H= | 0 —1J 


1 о 7 


ГА a3 . 


3 
l OT 
| 2 


1-4 求 下 列 各 个 函数 的 梯度 ， 并 指出 函数 和 堪 麻 的 E 
5. 

(а) f( x)» lnx 

(b) f(x, уу=х%—у—1, 


(c) 0) = 


(d) f G= 52 
[ 解 ] МЯТА LRA RFE, 称 此 点 为 奇异 点 。 
(a) VfG) — L, ИВАНЕ Ex OR IER Я, 


; [ > | | 

(0) Vf(x, уу=| у), И, Vf, э) 
жаы, ` 

(с) f(x) = 20080. Sm 

函数 及 其 梯度 在 x 二 0 都 是 不 定式 ,用 1 Hospital 法 则 ， 


у(х) = М(х)/ р(х), Exs 0а, (х) / DG 
E, x—O dT ESAE. 


因为 
EET 
x 89x, tec, DE (0) 1 1 


所 以 x 一 0 不 是 A(x) 的 凋 异 点 。 
类 似 地 ， 对 于 V1(0)， 有 


ГЕ 24 * 


ЭМ __ 90 _ pu __ — 5110 
Fm xsinx, Эх =2х, 22 (0)= EN = 


РАШ {Ех=0, \7//( ху ЖП. 


0px вх. Sna - 
(d) Vf = яа. 


fo». VICO 部 没有 奇异 点 WAL Hospital ЖЛ 
验 x 一 0 点 。 | 
1-5 确定 二 E PT 


“ 1 1d 0 ` 
a) A= b) A= ， 
ФА оз] Wa! 


2 
t gpi” 
(о) =| 2 8 J _ 
LM) 首先 检验 主子 式 ， 并 使 用 Syiyester 定 理 ， 


l | 5 07 | 
w 11129, | t | 3 > 0， 所 以 A 是 正定 的 。 


Olio [1 ;|=0，14| 0， 所 有 A 不 是 下 
定 的 。 | 
1 2 | 
цо, | 2。 є ["2..ЯПАВЕЖЮ. 
1-8 ERAR 1/x 当 x>0 对 是 严格 丁 的， 而 当 x<0 时 
PRR, 7 ee tft 
[证 ] 必须 证 明 
f(x FO — A € Aféx а-я 
м, Xg >i, 4х, VAAI 
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ЦЕНАХ + (17A )y5AfGi)t-2)f61) 
шх, 0,0, X EX, OLALI 

Я fG)-Utr, В 

Аж) (i —4)fx,)— абаа) 
Ах (1—4). 


— 


XX, . KUTIS 
— А14) (х, x)? 
XiXg[ AX. (1-4) 1 


HAA, БЕДА (А); KAA x, БО] 
(x,—x,)!' 20, Ш, МР, x 0m, Xi), 有 
X,4,20, ЭН. ` 


Ах, ++ (1-А)х, >0 ху, x y> 


Àx 4 (1—2)x,<0 Xx, Xai 


| Au —2)G 22) MR 
ак, xix ая, а) МАП, DO 


A(1—2) 6 — 2)? 
mix L Ax s (1— A08] 
AAH VOR В, Шо 时 是 严格 天 的 。 
1-7 ЖТА АЕ Неве, 


<0 ХНЕЖНХ,, x40 


(a) Р(х) = 32, 二 te (с) РО) mat 51, 
(5) {#(ку=ху*-+К1пх,х», (d) foo 2 In(xi4 
S xad axi) 
[W] <a) X b) 3xidaxe 171 J 
вил. Fax ye 1^5 


= 26 = 


H= axjg”? ба" 1 1 4e 172 | 


fifa 


L 6x 二 46 t * (14 x3). Britanje 1 2. 


(5) VADS [m Tix, ] 


x, nx, 1х2 
u-í даж aa хох Чая. | 
| долла iine, parmi xitin j =m} 


zx] "r8 0 0 № 
2х, Hejo a T 


|. 
7%: s 0 0 23 


(с) VIG) = 


_ 23 ix _ 
xiTxuXadexi 
(d) VfG)— Уд, | 
хіх 
= 1 . . (—2xixi—2x,X, XX 
GETH EXP arat — ax x, xj--2x1—2,;. 


1-8 ЗЕ f£ (к) атк Охе ро), ЗЕ S 


名 是 正定 的 ， 
:证 ] 很 据 定 义 : : 
(0х. аку оу) finu. 


О А1, xX,=x, 
因而 АО) СА) Ax CL 2)9)770 
将 Го) = qp Tt Qu fs A Est, & 


„ 21 „+ 


иж + + x; Ох, bo EIL Tx 十 +1 0х, | 


一 4 X23 十 (1 一 入) x, E 1 | Axat (1-24 X, | 
Ох. 4 (1—2)x,120 : 
由 此 得 . 
ACi— 4) CX —x3)7G,—x,)]170 
Sfc, Их, —х,-=уу0, Ңо<А<1, XD. 
A(1—A)y"Qy 70 
B BAO EF, | 
1-9 证明 凸 西数 的 和 是 凸 函 数 。 
[uE] ЕЈ, (X) d—1,2,, mf 
Е. X 


rt 
5 


TA Хс E? 


FG)- Y f) 


ый 
ВХ, X), imd, 2, з=, mE, EA 
Ў (Ах, HOA OSAF tN) 
Hisl, 2, 2 m, ОКА, Xe Xo EX 
对 所 有 的 i 求 和 ， 得 
Ў Gs Oa) Nf 0) 0-2 б) 
£ =1 i=] 


F(Axs4-(1—2)xi )AF(X$4)-(1—2)2F(CX1) 


НЮР) SuSE, SER, ЦА РИ. 


^ 28 ` 


1-10 У, х„у=хух» 在 тҮз? 
Х= {9} х;>0, 4,2077 | 

LI S Fun PIB S U, f(x, я ЕЕ" 
їй, ВР, XXL Eo, XS e ET, Hi dE RS ОА 
«i9, ж | Ea | 

fOxitG-Ay»o)«M Ga) O-20) 


- 11. —275 
2008. "HN 1 | E " 
则 fasil D=, f(x;i)o(—2)2-—4 
_ Ша | 
| 2 Jaza, 上 
— 8A T1 
al 
Eif[C—3A4-1)/ (A117 С +0030) = 
А2 -63—1 
MG +008) AC— 0+0-2(-0= 
一 34 一 1 
问题 在 于 一 94? --6A— 15 — 34— LAE ERE FCR ELI, EY 
&A&-1/2 ИНЬ Аим. МН. ЕЕ? Ж 


TW. 
现在 考虑 站 中 的 二 点 ， 中 如 说 


"OM 


ML /(x,)=(2)(2)=4, /(х,)=(4)(1)=4, Яп 


Фа лү (ФИ) тЫ E Мхзха GE 黑体 ) 甫 示 二 二 同 向 量 ( 有 
2 Exi1x1 28). 


* 99 * 


DIM HEB 


因而 J(2Ac2, —AT2)2(242)(—4 F2) —2A* + 
24-4 

Af G)43-O-4)f()4A) TF (17 2)424 
问题 是 一 24? 十 2% 十 4 所 4 是 否 对 所 有 0 所 4 所 1 成 立 ? 令 
4 二 1/2， 可 以 看 到 不 等 式 不 成 立 。 因 HL, хіх, НЕХ 
++ & К, РНЕ, x x, 在 无 沿 着 过 原点 的 (E 
意 直线 静 是 位 的 ; 

4 xax, 0а<оа; Wif(x)-axi, X T Bp BJ 
0<а<оо, Ва, BH, ЕРУН) —Е 
&, fo) RIMIS, ШЕЕ ИЖ, E x=, М К 
=% = jx, 

1-11 将 下 列 函 数 写成 5 二 X*Hx 十 4 EA 

(2) yox 2x2) 42:4 4 3xi +58 Ax. 
2%: 3х3 -- . И 
(b) v—5x1--12x, X — 16%, Xs 10%3— 286x% -17x5 


— 2X, AX it, 
(c) = — AX xg HiX T5xi— 10X 5X5 T8x2 


» 


Ë L 2 г 47 
1 3 1 а | 
(a) H=) ^. | q= | | 
| 2 | 5 \ 3! 
-56 =8у 7 一 : 
(b) H= 9 10 2 -| -.| 
-—8 —13 7 = 6 ` 


1—23 3 о 
(с) "E 5 -5 | "E 
L 3—5 8 0 
1-12 确定 下 列 二 钦 型 的 正定 负 征 手 质 。 
LI] y—xi—A4x,x-F6x,x4-4-5x1—10x,x,4-8x2 


或 者 y= 二 x*Hx， 其 中 


* 


‚ С 1—29 Зо, 
_ 3—5 вы. 
ДЕЕ v i Е 


2 || | | 
5 | 一 "一 4 一 1， H=- 2 


И, Sylvester 定理 ，H 不 是正 定 的 。 类 似 地 ,对 于 一 日， 
1 一 证 二 一 1 因而 村 沾 不 是 负 定 的 。 于 是 ,H 只 可 能 是 半 正定 ， 
半 负 定 或 不 定 、 ЯНА BU y AGE icd f LI AG 办 
i, папа знада, | 

X370; Rl ysextzF6x, ха E821 m (au) Gn 224) 


Фл, 8, x, ——-1, Ду (32:4) (3— 2) — 170 

Яд, =0, x,—1, Шу=4(2)=8>0 

ЕН, 

1-13 为 于 习题 1-3 中 的 各 通 数 , 画 出 在 五 ?的 等 SUAE, 
并 指出 z DEENA. . 

(a) z=x +2x5, ша, х mm 25, DRICA), 

(5) 2 二 x1Xz， 当 2 二 0 时 ,或 者 有 х, =0, Ж x20, 
REl), 


. 3] * 


z 一 0 人 时， 有 % 一 一 P za 一 0， 见 图 1-14(d)。 


(d) 


B] 1-14 
1- 人 4 对 于 下 列 每 一 组 约 东 。 作 出 表示 可 行 点 集合 的 图 
6. ежа. 假设 4 六 0，2% 20。 
(a) xi-cT(x,—1)!'—1«0 
(x, —1)* 3-x$— 10 


* 32 = 


(5) м-р’ 
x°+xi—1=0 
(су sitesi 1560 
xir T T< 
rg] (EGER, BER. 1-50). 
(b) FREDETE D., MEI) 
(c) FEDERERA., MASC), 


(c) 
图 ]-]5 


1-15 ”一 个 制造 过 程 ， 在 给 定 的 时 阅 周期 内 以 成 本 
Ji Gu) Ex. 件 产 品 。 在 每 个 周期 内 需要 di Ро, Ш 


° 33 € 


diy. ИИ Tae (у). EEH BARH EARE 过 - 
ХИ, АНЖУ 件 .如 果 初 始 库 存 为 0 ВНИИ. 
使 中 个 辕 期 的 总 成 本 为 最 小 的 非 线 人 竹 规 划 问 题 。 

[W] 总 成 本 由 下 式 给 出 


FG,y)o У UG +с,(у,)] 


fa: 
4E— Fd PERS Fi Tp Ж 
y immyca i Tx —d,, Hom yQ—0. £51, 2. =, № 
” 非 比 性 规划 癌症 是 


min YU Gore) 


таит, 
且 使 У, x, X, y, =Y 
注意 变数 x; RAHA, MARA 

min Y hiya tdi) +, (yi)] 


fi {=, 


Hf£y,—vy; +4,&<Х, y = Y, у; m, 347752, 
i=], 2,-,n d 

线性 规划 ` 

1-16 АНГАР: EUIS] REO 

[#1 如 果 f OG —2,x,, cly Sb yi By 20, ШИ 
有 线性 规划 问题 


min Y te Gi ytd) иус] 
T 


i j=l 


SETE 


В у,—у{- MON Pes, 7:20, an 
í7271,2,- n 

-п ”一 家 大 面包 店 ， pu 
шыла, RIETI RETE AME, 671,2, 
eon, ЗАМЕР UI п ЛКЕН Dy RR 
ДЕЯ, 1=1,2,5-, n RUE АННЕ: 确定 出 哪些 
工厂 殿 应 哪些 配售 店 ， 以 便 使 总 的 运输 费用 为 最 少 。 

[B] Шу EJE Өш ШР J BARAR, Cy 
其 每 个 面包 的 运费 。 Мат вдр, 


min Y Yo, xo 


* 
Јана уз. 


BE Ул, <s, bes X, 220 


jul ` ` 


1-18 О zi— 2х1 x, 3421 
(a) ЕЖА ИНЕ, 
(b) 写 出 Hesse 和 矩阵 。 
(c) 证 明了 f(x) 是 正定 的 ， 
(d)f X) ES ЯН 
(e) 求 在 点 (2，2) 的 切 超 平面 的 方程 。 
1-19 БЕКЕ ЕН ӨЗ} ааыр 
(a) #==хЇ-1-2х}, (c) э=хү/х, ` 
(b) z=x1—xi+4, (d) z=x1—2x x;+x1-+-£x, 


"395-7 


1-20 uEBHe 7" j^ kii, 

1-21 91-19 中 哪儿 个 函数 是 二 次 型 ? 

122 REE, (a) 2=3x /Xa 二 de 172 

. (ё)а==(хух,)! 

123 1-22 ТЖ Незве нЕ, 

1-24 和 确定 王 列 各 个 二 次 型 x7AxX 的 正定 负 定 性 质 。 


r2 1 4 t 1 05 
(a) a= 6 0 | (b) a s 2 1| 
L - 1: 


i—i 2 l 2 
D 1—2. 1 
(с) A= i~4 2 = 
L 1 一 1 0-. 


1-25 "P 
(0) y-—2x]q xix? 93124 3X1 ax 2х5 
(5) y=x1—6x ix xl 9x, 

1-26 图 解 Жоосу 

па(х —6)°+-(ж,—2)* 


^ 
m. 7 


В 0.5xz,Tx,=4, fenem =a. 
X 220, 83220 š 
127 BE 
max 2xX;,4-2x,-b4xi-d-2x,x,4-x3 .- 


£173 
B. х,—х,220, z Tx «4, 5\3 
1-28 图解 | | 
max ха 


za: x ` 


E 36 E 


Н зх, 2x49, 0.5x,-Fx, 4 
X120. Xx,20 


1-29 图 解 


max 4х, + 3X5 
=) Va. 


EM 
` д. = = 
{17 


HBH 42%, —х,530, 0,5х,-—х,%0, 2.45.55 
Хх: >0, X220 


1-20 RÆx x, RENE. ЖЖ 1-29, 
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TRIER ”证 典 最 优化 


一 、 极 大 、 极 小 和 鞍点 
汶 一 章 讨 沦 无 约 训 静态 最 优化 问题 。 问 题 的 提 法 如 下 ， 


minf(x) 


йж, Е хи. VUE 
£ BIB АДАА T ФЕТ]. Я fOOXETE А # E F 
ВНЖ МЕ? ВИ: ЕЛЕ Мм 5939. ТАИП 
从 定义 开始 回答 这 些 问题 。 

ард E MIELE OEE E" mpi e X 上， 
EXT хе, EJOS 700"), WEN COE xt 
取得 它 在 整个 所 上 的 绝对 或 全 局 极 个 什 ， 

En a ЖЕ Ski d: Vk 入 0) 定义 在 EE* 厂 六 点 其 
6 邻 域 中 ， 如 果 存 在 一 个 осеб, ВАРА п ох 
тек, BE Ок) f(x"), DJ kin A f(x) 
ИНН. 

在 х* M ЕН, ВНЕ RS 
TERNES X 上 最 小 的 函数 什 Fax*)。 对 于 大 多 数 实际 癌 
题 (除去 极 小 是 在 jx*| 一 oo 的 情况 )， 集 合生 可 以 是 整个 空 
间 E*. Ш, ЗВОНИ OORE FE 
附近 的 其 它 点 ， 具 体 说 就 是 由 对 于 хе 的 一 个 SEU я 
为 极 小 俩 ( 见 图 ?1)。 因 而 一 个 函数 可 以 有 许多 个 局 部 极 小 ， 

* 3B- 


ВАНЯ, Н fO i=, p; В 
Ee Tra Akte. . 
FO SF, #= 2, +y: p 


.. ea Ооз 
0 
edi hen - . 


其 中 


全 局 极 小 值 总 是 能 够 选 出 的 。 每 一 个 全 局 极 小 记 是 局 部 极 
小 ， 但 反之 不 一 定 成 立 ， | 

一 个 全 局 极 小 信子 Cx") ,和 如果 FX) (ки), ЖИЛ 
什 是 唯一 的 .并 且 称 为 正常 的 全 局 极 小 往 。 在 局 部 家 小 的 清 
AUT. BUR ухе) ЕЛ, НАНЕ 
ЛЁ, ЗЕЕ ОТЕ) ИЕ, ЕВЕ РИ ЛЕН. B 
可 得 到 类 似 的 定义 。 


* 39. 


662-1 (a) ЕЩЕ? 24%), EA х= tim, 其 
th k=, —2, —1, 0, 1, 2, еее, sinx 有 无 穷 多 个 强 
FM, И snxie—i, MARE x*《 对 所 有 的 名 ) 也 
全 局 极 小 ， 但 没有 正常 的 全 局 极 小 值 。 

(b) 参看 图 2-2(b), ИЖ x} 在 x*=0 有 强 局 部 极 小 
值 ， 这 时 正常 的 全 局 极 小 值 。 —— 


sin x 


*.40 и 


v) PEE 2-20), 352270, 0-1" cosxdkx* =$ Ат, 
b=0, 1,2 эзе ш У 其 中 $= arctg 
С 0. узт. 3° „Ж ect сов «et FECOSX Romi, 

BL AA M, _ 

. 41-2 (а) WEA REEM, 则 x? Ax, 在 x* =0. ЖЕЖ 
的 全 局 极 小 值 ， 这 可 以 从 正定 性 的 定义 推出 ， 

(Б) ЖЖ А жЕр, li] xA BÉRRE, ER 
是 正常 的 。 这 个 全 局 概 小 值 出 现在 x* 点 ,在 该 点 上 ` 
(x*)* Ax* ==, 根据 半 正 定性 定义 ， B x*—0 以 外 ,还 存在 
Жк", ИВМ, E 


i Cm 


$42-5 (e) BAM? 2- 3G), T Lu ЖКХ" Е 
8:998 BOR]. 

(0) 参看 图 2-3(b)， 可 微 函 数 在 区 域 X* 上 取 弱 局 部 
ЛЕ ^ 
ай, X TS SCR OUR EUR IIS EC ADR HE RU e 
ВИЖ. НЯ, ЕВ ЙОНИ —Á EP РИ, dX 
ЗН URP REHA ERAR EA 
ERASE ЗАВ. ME Аав ннен 


. 41 ° 


EMO, ЖШШЕ ЛИШИ. Ува 
种 困难 情形 ， 一 种 适当 的 办 法 是 确保 目标 函数 是 凸 的 或 严格 
中 的 。- 因 为 对 于 这 样 的 函数 ， 局 部 极 小 值 记 是 全 局 极 小 什 。 
如 果 序 数 是 严格 凸 的 ， 那 么 全 局 极 小 也 是 唯一 的 ， 也 就 是 说 
它 是 正常 天 全 局 极 永 , 因 此， 对 于 凸 曾 数 ， 只 要 找到 局 部 极 
小 值 ， 问 题 就 解决 了 。 我 们 将 会 看 到， 大 多 数 的 理论 和 计算 
都 是 为 了 求 局 部 极 小 ,由 此 ， 为 了 计算 上 的 科 单 起 见 ， 我 们 
经 常 是 把 注意 力 限定 于 凸 目标 函数 。 然 而 ， 对 于 很 多 有 实际 
意义 的 问题 ， 这 一 点 并 不 总 是 能 够 办 到 的 。 

pi2-4 i$ 大 zx 是 定义 在 XC E* FJ nS E 
数 ， 那 么 它 的 Hesse 矩阵 HCx) 对 于 所 有 W xe IERE E 
或 半 正 定 的 。 出 半 正 定性 的 定义 淮 出 fo tes x* Ж НИЕ 
小 值 ， 其 中 x* {ЩД&(х*)7Н(х*)х*>0, = 


图 2-4 


8125 参看 图 2-4 求 解 
IB. (21—283)! 


ТИНА x,=x /2 ЖУ, Sind ENORMES, НЕЛЕ Х* 
Киа МА, Ян 


= 42 +. 


х ET —2X5 =} уз М 
912-6 设 Ї(х)=х7Ах bx, Ar `, QUAE Ya! 
6 1 1) | 
zl 1l: р 2, "| 
1 9 4 


Ох) Hesse ERE 入， 因为 它 不 依赖 半 x， НЕЮ 
序 主 子 式 都 是 正 的 


| | eri] 
А = A= | Че Aa 12 0)=42. 
i04 


由 Sylvester 定理 可 知 , 对 于 所 有 的 х, A 部 是 正定 的 。 于 
是 由 定理 !-3 得 出 [GO RIO, JETER AUR DEAN 
й. .. Е 

minaman, Md e й, BDSTEEDUR TAM 
最 优点 (或 区 域 )。 呈 有 多 个 极 大 或 极 小 ， 或 兼 有 极 大 和 极 小 
的 函数 称 为 多 蜂 函 数 。 

ШЖ (x, y), ЗЕЕ е220, RENTE zix- x <= 
的 所 有 x 及 满足 一 yof<? 的 所 有 A | 


Кх, у) fo; у), y) ` 


ЛЖ f(x, Ee уо), TE, М f(x, УЕ 
(хо, Y CEU, BAO, y) EOS E BE CIRCOLO 
极 大 ， 而 作为 变量 y 以 该 点 为 极 小 。 对 于 二 个 变量 的 二 次 可 
微 函数 f(x, у), T BF ADSU CA) НЯ, B 
各 极 小 。 用 必要 条 件 


. 43 = 


Рано, Эбби, $0)=0 


定 出 C(x,，y 点 ， 并 证 算 С 
一 1 (у) |. to, Но) 
那么 : 


(1) же AO, HE 


af? 
àx* | 


PT Let <o] 
Fo Ëy | г 
(хь, yo) 是 局 部 极 大 
(2) WE Ao, XH 
ы дү | 
ox? е0. Yo 70 E ду? leo, Y. >] 
Miira РЖ. 
(3) WE А<0, Rl(x,, Ям. 
(4) 如 果 友 二 0， 则 这 一 检验 得 不 出 结果 。 
可 措 , 类 位 识别 鞍点 的 简单 条 件 在 高 维 空间 是 未 拓 乌 的 ， 
3x ^p In] SR LV. 


Е. э 
这 个 问题 以 及 当 A 二 0 时 该 怎么 办 ， 将 在 下 一 段 讨论 


ух у 
df ox FEL di- 
3x 2x, Эх? 2, 2», 
КТ .20 x 
Pi 24 H 


A-—2(— 2)— 一 0 一 一 40. 


"T yo 二 0 是 f(x, у) Ч, А 2-5 ВЕ 
я 44 * 


Do am =v DÀ 
f =0 [| f =0 
f 8 , f>9 
=—— х 
f =0 f <Ü f =0 
o Hi VES " М =. 


线 族 可 以 消 楚 地 看 出 这 一 结论 。 1 
在 一 元 邓 数 的 情况 下 ， 与 较 点 类 似 的 概念 是 拐点 。 如 果 


ЯР (х„у=о 


Ms К ИВА, BARI x。 就 是 
BA. . | MEE 
pi-s 19042-6, SB y(x)=x<x*, ТЕН 


TREDx.—0, (ВЯ 
. 45 ` 


d'f _ _„ ва вз 
da7 gx ， 0, As 635 


Е x,—0. 1855, 


fo 


- E 2-6 


二 、 无 约束 问题 


现在 扒 导 无 约束 问题 


minf(x) 


具有 强 局 训 极 小 的 必要 条 件 与 充分 条 件 。 我 们 假设 IOS 
二 坎 可 微 的 ， 为 书写 方便 想见， 这 里 的 推导 只 尘 二 维 自 变量 
x=[x,, х, 的 情形 进行 ， 而 所 得 结 RERE FS 维 的 


ва. 
(х0, Yo) 


是 强 局 部 裤 小 的 候选 点 ， 抬 f(x. у) 在 


(x,, У) Е Taylor 级 数 ， 只 保留 一 阶 和 二 阶 项 ， 仿 - 
x=x +A, y= y +R, mil 


* ÀG = 


fob y, ER) S Gnd, уо) t Bf (xo ya) 
+8 Go) МУ, Ооу) 


+, Ter V) 十 


其 中 | IS fy УЖОС» hi) 
B of D _ д] 7 E бо. 
Lar" DESY. 
afp DS 一 asf 
f 24 , ЕТ , fa. 


НЕЕ, 则 可 以 写成 
КА, У НЕ) 


fene, ye) Ma Gr. Уо) 
KORREN [^, Ни 1] 
Ë 


+0(а з) 
其 中 | up 
zl zx Jar 
HG) k " 


pc fys 


EAC y0) 的 Hesse M 前 表达 式 
FERH о), е2, | 


IRE, ДАХР они 的 所 有 点 和 
k, Ab 7 I ~ | 

Иж FA, уь +В) (х, у.) 
则 在 (xs，230) 处 存在 温 局 部 极 小 。 


* 47 = 


519 Taylor 983k, LRER: 
ВР. (хо, уо) НЕР (x0, Уо) 


à 
EXOLEMG уо), ЊО) 


АЕ Jy) RARO A Ae. ЖЕШ E E 
SARX. АНД OCA, Re ВА, k, ВЕН 
正 值 和 和 负 值 ， 给 出 以 (xy30) 为 心 的 圆 区域 ， 由 于 大 和 号 可 
以 到 正 号 或 负 号 ， 因 此 不 能 保证 上 式 的 间 二 项 是 正 前 。 我 们 
所 能 艇 的 最 多 是 使 


ETTET fato ув =0 
ХЕ EGURAE SUR TEL BER, | 
+ {ЕЕ Eb: АМ 2, 可 以 缩小 以 (xo yo) 为 心 的 圆 区 
域 ， 和 直到 三 次 项 必 高 次 项 比 二 次 项 的 值 要 小 。 剑 下 只 横 


КАШ 


HU ынс, эр 


这 正 是 正定 二 次 型 的 定义 。 因 此 ， 如 果 产 (ae，23?0) 一 小 
felz o, ya)=0, HE Hx, Yo 是 正定 的 ,那么 fix. У) ТЕ 
(хо, уо) АТЕЙ ЛА, GEA, 

ЕН(хь, У), Е ЗЕЕ А dm 
ВИЕ, iat A е, Н 


s vo Mo __ 
= 2 Ў, з=; 3x, e А Ак, 


4.71 JQ71 


сө E TU 
Mj f(x. ЭПО, у) ЛМЕ. EUR TELA EFH 


. 48 * 


BERKE, SACR. you foo DARA. 
HF n EL BD BS f(x). АМАА 推广 为 
ГАСЫ fr, (w .)=- = f, CL )=0 
ИАА, k L SURE SET Е Hesse! 


gi HO) 3E SE HB X— ft. 
对 于 i 4 SERRA E FOJ ВЕК B Ж Pr 


fa Ga (ко) enm f. e) 0 


ХЛ BEREBER, IUBE ЕЕЕ kE 
式 外 ， 还 要 使 H(x ВА, 
为 方便 起 见 ， 这 些 必要 条 件 常 写作 楼 车 加 曙 的 形式 
У Exa =t 
ATA- ЕИ А EREDE, RLR 
ХМ ж, I LEN | T i 
9i2-9 
minxfÁx-4-B?x 


ОБЖ Е, АВ = 0g x*=— ŽAB 


充分 条 件 ; х*б= AIB ПА DERE Ç l` - 
A 的 正定 性 与 保证 A 足 非 奇异 的 ， 即 A S ege. 
对 于 问题 | 


maxx"Ax-E-B7x 
x 


有 民 样 的 结果 ， 只 是 ДЕАШ, РШЕ x" IRK. 
* AO ` 


912-10 ЖЖ x? — Ax? 的 级 值 点 ( 见 图 2-7)。 


Шотт „а 


[RI BER, зх'—вх=б хо, жо 


х*®:=0 mat 
à 


Ж#Н. HG) ost co, siete 3 Нн) eR, 
极 小 的 充分 条 件 成 立 。 i 
*— т = + у" 8 可 8 = — 256 
Mix*—0Hh, /(0)=0, Mix зы, (8) T. 
#1211 тіпхі textat дух 65198 — x xa 4x2 


BERM | о, 


， Sf o axi 12x,x$d-xi—60xi-0 
Ox. C - T 


af 
= = 12х15, IX si x= 
Oxs 1 2+3 12 = 


а - 
= 一 18x,x4—x,-Fi2x—0 


E 50 E 


ЕФ. H 正定 ; р 
Ja Аза Аа 
H= fa fredie] 
E fn Taa; 


Создор. ОК noiwni ` SX 
县 fii—i2xbPTd2xj, РНИ | 
фаз ON f. == 1858 = Ffar ' ' 
fas =— 36t: Xa 十 2455 as 一 一 1 一 faa 


— LJ 
一 il 
— % . 
LEE 


使 用 上 一段 中 的 必要 条 件 来 确定 极 大 和 极 小 ， 称 为 最 优 
МУ, За, ТАНЯ, МОЯ 
пи. жия | 


`ç Fx)=0 


FRATAR EAN BARATTE- NED ERN 
TIE, ТВ, 这 一 组 联 立方 程 几乎 都 有 许 
多 解 ， 为 了 获得 全 局 性 的 嬉 采 、 必须 求 出 它 的 经 一 个 解 ， 同 
时 还 要 计算 每 个 驻 点 上 的 Hesse 8, ОАЕ А 
极 大 。 哪 一 个 点 是 航 小 。 然 后 ,为 确定 全 局 极 小 ,还 必须 比较 
所 有 极 小 点 上 的 目标 函数 值 。 在 f(x) 是 高 阶 非 线性 的 靖 N 
下 ， 甚 至 写 出 梯度 的 解析 表达 式 也 会 是 一 件 很 肾 巨 的 任务 。 

在 第 六 s 章 中 将 讨论 直 捞 的 最 优化 方法 ， 它 是 通过 处 理 最 
优化 问题 本 身 来 获得 数 信 结 采 ， 而 不 是 通过 提出 中 间 条 件 
《比如 必要 和 充分 条 件 ) 然 后 再 去 求解 来 获得 数 什 结果, 

有 许多 数值 方法 可 以 用 于 求解 非 线性 方程 组 ， 这 些 方法 
在 为 数 众 多 的 数值 分 析 书 里 都 有 禾 述 。 为 了 完整 起 见 ， 这 


w 51 + 


介绍 上 其 由 的 一 种 方法 , 即 Newion-Raphson Fi, SUB US 
ХЕ 25 BJ B (8 [8] Ж 


f(x)=0 
来 说 ， 是 著名 的 Newton 法 的 推广 为 了 求解 上 述 方 程 ， 先 
ERA хо НЯ ИОА ЖОЕ x Ao AEREN х 


ШЫЖЕ кт жү, 再 从 新 的 点 x, 重复 这 一 过 程 ， PURUS Ga 
为 止 。 


这 一 —bibi EROR AVE LU 个 点 列 


fs Bx) Г 
PO 


Natl — 


Fix) 


w^ Xy, 


E 2-8 EI 

w2- 83 铬 出 了 这 种 点 列 的 例子 ， 这 一 方法 如 果 是 收 化 的， 
енен, Е T Rl e t i 
f£. Hro 六 和 近 于 真实 解 时 ， ШШЕ, 5 

2212. Newton НЕЕ, ATHE 

| PPM х= Eyo. 


. Бї + 


BIR m Qo ot uu tA UM ts. 
я 46 6 
BUB. ЖЕ Newton 算法 是 


si—g 
2X4 


Я 


2j a= 8 R хо=3.0: F, 前 三 KARI: 


现在 我 们 把 Newton 法 的 EXE, 以 求解 从 最 优 
化 的 必要 条 件 导 出 的 V fO 0 形式 的 联 立 方程 组 。 为 此 ， 
首先 把 该 方程 组 展 成 一 一 阶 Taylor 级 数 并 令 它 为 零 


КООРУ S fO) V TEM 
Ange V Vf (x, ) 正 好 是 Y(x,)BJ Hesse ЖЕ, RE FE Н(х,) 
Un. ЙКНХ»+1 每 到 
Xni = X4 — H^ (к) У f(x, ) 

如 果 对 汪 所 有 的 xs，H (x ) 都 是 正定 (或 负 定 ) 的 ， 则 算法 非 

ЖАЛИЙ, KC x EP B SR By) ЧЕ 

才 不 依赖 于 хо МИН. ВЯ, ЗЕНА S Ж, 

ЭЖЕЕ 1 сч ураа Ха ЕН SC Ву, 这 

一 方法 的 缺点 之 一 是 ， 每 一 次 选 代 都 要 计算 f(x) BUR E 三 

阶 偏 导 数 。 如 果 ОЕ ЖИ, № Hesse 短 阵 AH x, E 
m. Bk ta 


忆 ， 因 此 对 于 各 次 选 代 HIT MERRER, GEHE LTR 
Hab. ЮЗЕР H-*， 由 于 这 个 原因 ,在 求 驻 点 时 ， 
常常 用 二 次 浮 数 来 通 近 非 线性 甫 数 。 = sols 

Нех РАНИТ, 0,27 02-10. 


习题 与 题解 


<=; Ыы 772 Т 
2-1 #/(х, y»)9(y-x*)y— 22), ШЕ ze š$ 
原点 的 任意 宣 绕 上 ，f(x，y) 在 (0，0) 点 都 有 局 部 设 小 ， 但 
US EET s, 
NEXT ACCETTA Tr P 
f.——8xy8x*—0 | 
ун 3st iy ° Cl 
ИЕ, ME | 
fz = (—65-+24х1 ) fo a50 mer" E" 
Раа sm n =й, НЫ 
ды ив, e < LETTE 
вур 0 
并 将 f(x, УЛЕЙ НАЯ Taylor 级 数 至 三 险 项 ， 
ex dx 
Feds. dy)yem [ds fody 04, af " / M Ja) 
osos FU ees (2) ES a E dy 


. oes УЗ ЧУ) Ру, (d y)? 1 
ATEH. ` ' | 


(dx, dy) = (dy)! — аз 
a 54 r 


-对 于 是 够 小 的 dx dy, СИЗ, 但 是 二 次 项 与 
ах 无 关 ， 所 以 它 没有 给 出 关于 f(x, УЧИ ЗБУ. 
信息 ， 考 察 三 次 项 可 君山 ， dy 符号 的 变化 将 引起 yx y) 
FREER), И 
ЖИ ad] И ЕГ datis устя, тыд. f(z, У) 
作为 < 的 函数 为 | 
g(x)-mm'xti—3mx! 2x 
sg mt — omt + Axt =o, 


dig g TREAT 


эщ x= 0 时 ， о-о READS ал 
部 极 小 。 : 
227. оуан x ERRAN, жанв 


-小 也 是 全 局 极 小 ， 
[证 ] #х,х* с X.x, ARMER X RATHER 


* 55 • 


z-XoX* , SEX, Ext RAHAA bis ТХ, Bp 
дже (1—А)ха cx, бд <1 
因为 foo Hg. ЭР, 
ICR YLA (1—2) Ko) 

А рх) о), FDL fO) (ка) 

现在 考虑 x. Ее М, RE 0а Ху, W 
»" 
B 


usa NL НХХ, 


所 хо) (х), ВО ВАЗ) f(x yE 强 ДО 
ДМЕ, A itxt =x, 
С 无 药 东 问题 
2-3 Жим Р(х) = {р ш, . 
[E] 9f eaaet, 32. n[i- is 2» Жн 
x*—0, x*-22/3 


otf _ | 


"M 6х 
Eg х*=0 是 局 部 极 小 ， 机 х*®<=2/3 是 局 部 极 Ж. 当然 全 
局 被 大 和 全 局 极 小 和 分别 在 х*=— оо 和 x*= co 处 。 
2-4 试 给 山本 章 讨 论 的 各 种 最 优化 问题 的 充分 条 URS 
[№] M Taylor ЖДИ, ВЯ 
УИКх)=0, ИУ 
x"Hx 


=. #=—2<0 
"з 


RIH B] TAREA ВЗН tH RJ АЕ. 


z t 
H * x" у 

正定 强 局 部 极 小 

АЖ BARRAK 

жшж нил 

ЖЕ SENS < 

TX ` WA 

TU 不 能 由 日 确定 检查 高 次 项 


1-8 设 了 (x) 的 前 上 阶 导数 在 x* 全 为 零 ," 试 兢 定 强 局 部 
极 大 的 充分 条 件 。 

[M] 如 果 前 上 阶 导数 为 零 ， 那 么 Taylor 级 数 的 优势 
项 是 я 


fot aD = Y 
te i QUII 4, #8. 


ЖЕНЕ, РО лку f(x"), 
第 一 种 情况 ， MEK ERK, MAH ЖЕ 8 
部 医大 的 条 件 是 


x 


PE ee 


Ji da Jaan 


ЖЯ, ME k LAS Tis] IRE PI Ж Z 
АХ), AX, “Аху, TREA TARO y: A АЪТ pr 3 


a 57 + 


ЮЛ ҖЕ, НҢ 


Л" PE вк с-з 


了 1 da 


2-6 RRIA hR -次 型 的 x*,x* 是 极 天 ， 极 小 、 
Жо ZEE 


[8] 因为 ?一 xz?Hx-hgrx， 所 以 有 
V (0 2H geo xt На 


о а-я 7 

(a) "e l ‚| 
L-5 1 9] 

4] [—23.5 

e= pei " 

Ее. 8 2 


f 1-0, Ауа Chi)? =25>0, IH=1>0, FH dE 
Н ЖЕЙ, хе А, 


[122 ` si r1 
(b) HI 一 | 2 21471 ,x*=— LH-! E = J 


t2 


h, m5, hi h, (h) 5270, IHl=i>0 
ЖЕН 是 正定 的 ，x* 是 被 小 。 


0 0 а 
€c) х *=—- H: | 0 H i 
0 0 


h,. 170, В.В (В, ,)3 120, JHi= -220 
+ 58 + 


H 是 不 定 的 ， 因 此 x* 是 鞍点 。 
2-1 Иже 的 极 信和 点 ， 


ж] Чао, Be 36; 所 以 


х*—=0 . ee 


fe |, =2>0, dejen, 


de 0) mns, RRRA, HHRREREA. - 
[Ж] кА =x *=o; ; Cof lu iig an an . ， 


{б 0% Lu зз Сс 


因为 函数 只 有 两 个 自 变量 ， 我 们 可 以 检验 判别 式 


2 2 
= а) 
A -(0)(0)—1?——1 
AHAA В х"=0 0, 
计算 
2-9 Ж Newton-Raphson 7; EXEC 
min4xj d 2x4x3- 2x5 х.х 


_ [8% 2%8-1] _ "NE: 2] 
[86 OL кын С но) La M 


TFT 215. 
н S 1) 
хех" H^ V f(x) 


КАЖ аї'ї=а1— Два 1] 


ХИ [x 25-14821 4165744} 


* $9 ， 


14 i4 

3 3 

x25! = = 二 = — - 
z 207 14 14 


Ht Newton-Raphson 方法 解 线性 方程 组 ， 不 管 初始 
frd x. УЕ, КАКАЯ. 

2-10 考虑 图 2-10(@) 给 出 的 函数 。 从 xs 一 上 开始 用 
Newton-Raphsoa 方 法 进行 图 解 . ERAS 1879 f'(x.)30 
六 (xi) 越 来 越 赵 于 平 直 ( 奇 异 情形 )， 此 时 解法 发 数 。 . 

[#17 用 图 解法 参看 图 2~10(8)， 


fix) 


fix) 


b 
Я 2-10 


* 80 * 


补充 是 


2-11 证 明 (0,0) 是 函数 (ay 二 vul п (0)y=syxy 


agg, 

-2-12 PET PIR RIRS R У HFB HE A. " 
ЖаН xs O ' 

(a) imd T 2x, — 


=- a 


:x 
фу = Бе! coa Xe төз š, rbsi- P 
—3285,x3-F17x]2x,— 4242-64, 
(c) y=xi—ix,z=,+6x,X, 4-5x1-— 10x, x, H- 8x2 . 
2-13 对 于 题 2-12， 试 确定 х* ЕТА КЕЕ. 
2-14 Ж Их, 34) (x1 ait) 0141) BECA 
-其 中 a, fla, ЯЖ\, Haitel, 
2-15 fx, м 


x?Hx, x=, 5] 


为 负 定 ， 试 推导 构成 与 此 等 价 的 充分 条 件 的 两 个 不 容 芭 。 
2-16 8%. 
(a) yz—3x*4-9x*—20 
(b) y-x'—8z? 4- 24x! — 35x 4- 16 
:的 所 有 驻 点 的 位 置 和 类 型， 
2-11 FR pue Ex ORA. ' 
2-18 Ж у= хе. 
2-18 Ж у=ет=/ (1-е?) КЖИЙЛ\, 
2-20 Е Жар, РЕ X 圆 形 ， 另 一 
+ 81 "5 


段 作 成 正方 形 ， 胡 果 要 使 圆 和 正方 形 所 转 成 区 域 的 面积 总 和 
为 最 小 ， 这 根 导 线 应 以 种 么 比 倒 截 汤 ? 提示， 直接 代入 。》 
1231 —1Ж ШЕЙХ, БЕШЛИ ДАЛЫ 
L08m?, ХЕРНЯ Я BON ИРЕН, АЖЕ ЕШ К. 
‚ 2-22 RH münxid4xi—4x,, В. fE 2x,—»x,—12, 

2-23 在 x=0 了 时 把 vi 十 2x 展 开 成 Taylor Я, WR 
JS Р-Р КОК, AMEE х=0.1 处 的 误差 。. 
2-24 ШЕНЕ РС. ИЕА, ВЈ 2-23, 
2-25 YE х=1 р}, Е ах ER Taylor 的 :级 数 。 若 
ЖЕ Р А, ВЕ x—1.05 ЖК, 
2-26 利用 Newten-Raphson ik, R хе" —2= 000 


s 
o d 
2 


2-21. 利用 Newton-Raphsoa 方法 ,; 求 出 ”，-. 
sinx — (x 1)/(x—1) 0 НИВ. 
E -28 利用 Newton-Raphson 方法 ， 求 " 
— 5x? — 6x -F 4—0 Я. D 
2-79 Е Newton-Rephson 方法 ， аси R 
x | 
1390047171 —0 
2— 400047! y *—0 
BLESS DAAXUE: 
(a) (x, y)=(8, 3) 
(6) (х, у)= (19,8) 
(с) (x, y)=(1L, 2) 


S 62 Ф 


(^o BIA HAüLagaugexelT - 
–. бейнет 
ЗЕЕ И 首先 考虑 只 有 


Ap st EDITI ЯЕ т, 
minf(x) х‘. 


Bg(x)—0, i=); 2, mn s 

I EL Spo x*, CE FOOD OR E, Ж 
县 满足 约 东 条件。 显然， 等 式 约束 的 存在 大 大 缩小 了 可 行 
E. Lagrange T 1760 年 普 先 提出 的 一 种 解法 。 是 将 约束 
ЗЕМ Lagrange $P 4, i—1,2,5-, m JER IIBE 标 菌 数 
土 ， 形 成 一 个 新 的 无 约束 问题 。 PX EL ME 函数 LOG A) HO 
Таганке, AACE mtn РЖ, Ив Seco 在 
空间 ЕВ" 上， 这 样 ， 新 问题 就 比 原 问题 有 更 高 的 奴 ЁЁ, 这 
是 为 了 去 掉 约 束 所 付出 的 代价 。 因 为 由 


(и, = + лено E 


所 定义 的 问题 是 无 约束 的 ， 所 以 能 够 用 在 第 二 жана 
ALERT. ЕЖЕ  - 


M - 
1 


Og; : 
————-—0, 2],2,-7,f 
==? ТУЕ OX; ! - 


. 6% * 


Mx =9:(х)= 0, $:1,2,-,m 


REBA mca 个 未 知 数 (x, ХВ) men ТВ ЛЕН, Py 
жет (хе, л) не. ВАР 


aL 
JA, ==0, Я um 


保证 了 在 最 优点 上 满足 约束 ,这 时 ид i-1,2,,m 
ЎЕН Lagrange BUS Reit S T IR UU dk as H 
L(x*, k*)= f(x") 


Р 


然而 我 们 注意 到 ， 即 使 fQGORIUÉRGB), ЕБЕ x" 大 极 修 
fü, Lagrange MU УНТИ ТЕ (x" 7) 也 不 是 严格 目的 ， 关 
于 这 一 点 在 第 四 章 中 还 要 作 进 一 步 讨 论 。 庙 于 上 述 的 驻 点 条 
件 只 是 必要 条 件 ， 因此， 可 以 不 加 改变 堪 运 用 到 求 极 小 值 和 . 
极 大 值 亲 题 上 .但是 ,只 有 当 这 一 无 约束 问题 的 解 存 COR, 
这 一 方法 才能 获得 正确 的 解 。 一 般 说 来 ， 这 意味 其 我 们 在 对 
ЕЧ Б ККЕ ДУ, BA IAS ARREK. 


Я 5-1 
maxxj--4xi 
Вх, 4-21, =6 
[g] ”这 时 有 
Г= 5? 4-4х24-А(х1 25,6) 
ðL aL 


ET 2X, +А= 0, OX. ` -—8X,--2À-—0 


Ф mice а 7 


a B4 + 


* x 8 РА . 
OL 一 ху 2х, -6=0 р ami, xii i, в, 


АН, хан B FR UR TUR АЦ, BH xi 
Apes, (91,05) 0e ,因此 所 得 хт, РИН REGE, 
minx?-J-4x£ 
Вж x +2. 96 
通常 ， 如 果 有 的 等 式 约 束 可 以 对 于 一 ELIXIDA 
WERK, WARF E JH ARARA АН E x E 
E. НИНЕ ТО Е, SUP T HRS EE, — 
解 册 了 这 简约 后 的 问题 ， ҖИ АЕ EE ADDE 
出 被 消去 的 变量 的 最 优 值 。 
Я 3-2 minxi4-2xi--x$ 
HE xici3xx4xi—i, x, +x,=4 
[MEO 首先 用 x; =4—x, ЖЕ x., 8 


L(xi 25,4) 21-211 -(4—2,)* БАСАР 


8x,X54-xj—1) 
iH p T Seo Tm 
aL - 
ax, z2X4,43-2AX, T3Ax.— 0 
1——— 
Sx euin +10 
TES Lagrange Ei E SE 


Lix, Ха, Xy, А, А) 
=x} ах ха. (Pme x.-4-xi— 10 


+Аз: 50х34) 


将 会 产生 会 五 个 未 知 数 的 瑟 个 方程 ， 
i 2x, 24,5, 4-345, —0 
дй жал, iA x PRA EL dA 二 0 
Ls 一 2%4 十 2 一 0 
P —xPT3xixdxi—i-0 
x 一 +%:—4=0 

Я 2-9 min(x;--2)'4(x,—2Y t 

Hi x,+x;=6 


ГЖ] ижади 
са -—2(x, —g)- 0, — —2)==0 
$8:1H, НИЯ x1—2, xi-—2, B f(xfxi)-—0, 
利用 约 东 条 件 消去 xs Я 
min(x,—2)?--(6—x,—2)? 


“аа, 2) 14723))70 
ВЕН х1=3, хї=6—3=3, Hf(xfxi)-(3—2)0 
(3—2):=2, 
有 约束 的 解 与 无 约束 的 解 都 表示 在 图 3-1 中 。 
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J (x,, х, ) 


Ë: 3-1 


通常 Hal ter ob e TH EE A 的 
E. 这 是 因为 约束 的 存在 仅仅 是 限制 了 可 行 域 ， 因而 在 整个 
Е" 上 搜索 得 到 的 最 优 值 ， 不 可 能 被 仅仅 个 E" 的 一 个 子 集 上 
的 搜索 所 改进 。 


Я 54 iin XTAx+ bx 
O Bi Cx-d 
Á S nxn EEEE, C E mx n Е, B m<n, 
[W] xL, А) = ЖТАХ ФЬ AT(Cx —d) 


B V ,L(x*, A) Ах Hb -CTA*—0 
ae EP 0 
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w [pO 


А СТ 
其 M= |17 
eo Mefe] 
Gn) x (mn) e. WR 了 RETAK, TRE 
HX, HRO AN EM B. Re ЖШ ЖИ. X 
Lagrange RT ВТЕ А, HAT irie. 


二 、 经 济 学 解释 


MERT Lagrange RFE, ЯН 
ЕН RERO, ТШЕН I GB ELERE 
要 意义 。 185, Lagrange SE Y 8 — HRA EE IAS BERE AE 
Е, 而 且 它 药 数 值 也 常常 是 很 重要 药 ， ЭТ {йт ЖОЕ 
=, RAR KIR TAE 

minf(x) 


Bí£g,.Q0—5, — im1,2,,mEn |. 
其 中 数 信 Ь, 看 作 是 某 些 控 约 束 条 件 限定 的 稀有 资源 的 数量 。 
显然 ， 当 资源 的 数量 54 变化 时 ， ERR Аи. 
于 是 我 们 可 以 每 作 ， 0007 


BG)-f((b))--XT(b)(g(x(b)) —5) — 5 


对 b ç 求 导数 得 到 


ж, Узе + E ome E 


j=>1k= 


x B8 t 


* И "OR es 
TUER = 


СНИМИ 


aX ML 
|-3-| iao- =a 
BoBpox/ab], [0g/ax1l. Laa д уі is XC BJ PE E, 
ЖЕ ЛУН тхл, вхт, Яхт, НЗ, E 


Vibe [J| Y+ 29 [А асо 1 


ВА VIL-VIiL-0, ИА БАОРУ ЖЕ 为 


о, RAF 


VL, А) А 
SEX E AERA E LG* M) f), 有 ， 


Cr 1-46 M M, i=, 2,* 


和 RI AY ГИ № 
лыж ВН. 由 于 这 一 解释 有 价 
ERRE, HUAN Lagrange ЖТ ИЧЕ Е (Sha- 
dow Prices), | - 1 

出 上 述 绪 果 直接 得 出 的 劳 一 解释 ， 是 工 agrange RFR 
表 灵 教 度 系 数 。 这 意味 着 当 所 有 资源 接 最 优 方式 分 配 时 ， 景 
Арн СВ Ја GL RU RR Ж. ЗА 
ZEfCX)B ES EGRE BREST IR] ELE Dg o dE ЛУ EL, ВА 
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ЖҮРӨ А #=1,2,-е,т 的 符号 。 这 时 为 了 避免 EHE, XE 
把 双子 解 释 为 灵敏 度 时 ， 仍 然 变 向 到 原 问题 是 明 移 的 
例 3-5 考虑 一 种 稀有 资源 在 两 个 过 程 之 间 的 最 优 分 配 
HE., ЖЖ РН Е bE 3—), 希望 从 这 Pt 
程 中 获得 的 利润 总 和 为 最 大 。 因 此 有 
max f(x,)-- f(x, 


2}, 22 


日 使 хх. =Ò EE EH 


х? 


i 


Xit ку= В 


UO] 如 果 0) 50—02), ба) 507 
(1,—2)*, БАСНИ 3-3) 


. TO 7 


L-(100—x,—2)* —(x,—2Y! -A[ 341 x,—5] 


àL sta copi 
pa UR DATAS us 


| Vaate Pu | 
, E б „МЫ 


же аа | 
H xf-xt-b/2, j*—b—4 


(Казал - BI 
Bi at= bl (а 
u ^ =з» ML 


BHO dE b< 4 ВЕ, 9 ВЕНЕ ВН, b 
的 增加 会 有 负 利 润 或 亏损 。 如 果 b=4, M A'=0, ЖЖ 
无 约束 问题 的 解 是 相同 的 。 

Lagrange RTAS TTO EKBER ЯА R 80 A te ЕМ 
Ri. 例如， 设 第 i 种 资源 的 追加 量 可 以 以 单价 y 美元 购 得 ， 
那么 当 一 外 之 y 时 ， 就 应 当 买 进 这 种 资源 ， 也 就 是 说 ， 如 果 
第 空 种 资源 追加 一 单位 ,， 作 最 做 分 配 导 所 得 边际 利润 一 灯 比 
边际 成 本 y EA, ЖА WDR š ИИ EE ERTA 
的 。 

例 3-6 在 例 3-5 中 ， 根 设 沁 加 资源 的 成 本 为 针 单 位 一 
870, B b=2 时 ， 那 么 利润 一 和 一 2 大 于 成 Ж у=, ИШ 
应 当 购 进 ， 直 到 5 二 3 Ш. ИНА у, НВ 这 一 
成 本 再 进一步 加 进 资源 就 黔 号 本 的 了 。 Я 54, 3 Ë 4F 
么 价格 ,即使 是 免费 的 ,和 也 六 应 该 再 购买 和 追加 资源 。 
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三 、 入 的 存在 性 


如 果 将 Lagrange 乘 子 看 作 一 项 代数 方法 ， 用 了 它 能 使 
约束 最 优化 问题 的 求解 成 为 可 能 ， 那 么 它 的 在 在 往 就 不 能 在 
ЗЕ к ЕЖЕН ЖШ ЕЖЕ, ПН Ж ЕЮ ОШ. {Н 
是 ,因为 梁子 仅仅 是 与 约束 相关 联 的 ， 所 以 在 直观 二， 考虑 
它 位 的 存 在 性 取决 于 药 束 的 性 质 ， 这 似乎 是 合理 的 。 为 了 证 
明 这 一 点 ， 考 虚 Lagrange 函数 


L-f() + Ули) 


并 得 到 必要 条 件 
Varot |-39- 1o. g(x)—0 
其 中 д9/дх E nx m Ж. 
_09: , 98» ,,, дда 
OX: д5, FEJ 


9g: 09: ,.. д9" 
| dX. д, дх, | 
假设 已 找到 最 优 解 的 某 个 候选 点 x*"， 满 足 约束 g(x*)—0, 
如 果 该 点 是 最 优 的 ， 则 必须 存在 某 个 4 ， 使 得 


ELT E Xx? МИ п хт 答 阵 [gq/B3x]xt 是 完全 确定 的 ， 那 
AWRA THEE GC[6g/3xjxo， 且 -Gn ЗЕЯ, Ж 
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可 以 计算 出 各 яз MH BE l ag/ax]= 6 0) т, Н 
ЖШ, ШЕТЕН НХ", [09/ 0х] о fk m, MERRTE 
xc. Eh TH ROg/Ox],o B ДЕ xt, ТА 
存在 性 结论 没有 什么 实际 价值 ， 

Я 3-7 求 原点 到 曲线 y*—-(x—1*-01d iE S BL 
Л, ОЙ 

min, ху E 
АЙ у= G=, у= (91)? 

[M] 从 图 形 上 很 容易 看 出 这 一 问题 的 解 是 x* 二 1 
Jy* 二 0( 如 图 3—4). | 

Вж а(х, y)=y*—(z—1)* 

281. [EnD 

L9] [ so) 


在 (1i， 的 点 求 值 ， 得 到 


936: 


AO EON 1 ЕР. 


7 ! 


y= хт? 


* 713" 


SU, CREAR TETT. SH Lagrange 9% 


Le (x* yt DT G7 07] 


我 们 有 
de газаа 1250 
9L . 2 2Y-1/2 一 
ду, n +7 ) У+2АУ -0 
. s == у? 2—(x—1)3520 . (t 
将 (1，0) 代 入 方程 得 到 
1—4A(0)-0 ` 
0+А(0) =0 
04-00 


.显然 不 存在 有 限 的 4 值 满足 第 -个 方程 。 


四 、 不 等 式 约束 


第 一 章 提出 了 含有 形 如 
h(x)0, j=1,2,, r 
的 不 等 式 约束 的 一 —— 一 问题 将 在 第 四 章 
中 直接 讨论 ， ER ST RREA дно ИМ 
约束 为 等 式 约 来 ， 关 应 用 Lagrange 理论 先 得 芭 结 果 。 这 一 
-松弛 变数 方法 常用 于 求解 简单 的 不 等 式 约束 问题 。 
首先 对 每 个 不 等 式 约束 的 及,(x) EXA SERA GEO Щ 
0,. ШЖ 
05 h,(x)«0, j=l, 2, + 


T 
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那么 只 要 对 所 有 的 实 值 9, НЕА, Am 等 式 
也 就 自然 灌 足 了 。 应 用 Lagrange 的 必要 条 件 


A кы 000) 


EET ‚= 2^ 
Le x =I ` ... 
= 二 十 $a —0" £—1,.8, ‚п 


о t oz, 


aL в 
ЭА =й,(х)—01=0, j=1,2, e,m 


dp nage. j—1,2,,m 
由 最 后 一 个 方程 得 到 ， 或 4:=0, 00, -— 对 为 0， . 
ТУАН. 

(1) 如果 A570, 63750, XX BEER я ВЕ >o, 
最 优 解 个 加 该 约束 的 存在 而 改变 ， 所 以 这 第 了 个 约束 即 被 忽 
ak. ЯМ: 闭 所 有 的 和 一 0，j 1,2,5, ДАЖ 一 个 方 
程 得 到 | 

v f(x)=0 
БРУНЕЯ ДЕРЕ. 

(2) ЖП 95—0, 4:20, W| h (xw*)=0, НЕКЕ 
Eg PEE МОЙ Б. ШОНАТ 5б, Ro W £ W R. 
vf), MEM 

(3) 如 果 对 记 有 的 j, 9;—0H 2170, MJ h (x*)=o, 
FERRE УК ойлат Е ЖЕ 
优点 。 

例 3-8 


>, is5 +. 


min(x—a)* +% 
Bi хре 
[8] 5 0'—x—c26, ӘҢ 
工 一 (xz 一 03 十 5 十 MLx 一 c 一 92] 


-2 —2(x—a)d4-0 ; 

OL „д 

ED x-—c—8*-20 

ðL ола 

"$8 240-20 
三 种 情况 是 ; 


(1) 4-0, М х*=а Н 0*—a-c, М X cca, От 
SC E 0520, И; catt , НИ хо Пра 3-5(a)]. 

(2) 0—0, Hi z*—c,HREHLEER 边界 上 。 这 时 
A*-2(a—c). AA A* 350, МЫ ce 时 ， 得 到 最 优 解 
[如 图 3--5(5)1. 

(3) ШЖ 0'—0, H А'=0, Ш x*=c, #Щс=а, Cm 
3-5(c)]. 


五 、 计 算 方 法 


ЕЖА ЖЕ Їй НЇН) 7706 — НЕ, EA HE Lagrange 
方法 也 导致 一 个 重要 的 计算 问题 ， 即 求解 由 必要 条 件 产 生 的 
EUH m+ n 个 未 知 数 的 mt откл 


У „Р(х*, №*)=0 


. T5 ` 


fx) 


° O DERE 
(C) 
| 图 3-5 
VA4AL(x"*, ^*у=@ 
这 间 对 无 约束 情形 使 用 间接 方法 所 产生 的 计算 条 题 该 于 同一 
类 型 ， 尽 管 这 时 维 数 升 高 了 ， 复 杂 竹 也 增 邵 了 。 有 许多 数值 
方法 ， 例 如 在 第 二 章 中 讨论 过 的 Newton-Raphsor 方法 ， 
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[EA а ОХ j am. ЗЕ УЕ ЕН BM ГАУ, [Bip mE 
ЖАНА, НЕ Е m+n 很 六 的 时 候 更 是 如 此 。 
$$ 3-9 考察 风 Newton-Raphison 注解 直列 方程 组 的 : 


W eer 
V ,L(z2*)= U 


SEEN 


[№] Newton-Raphson Ë B X- 


2,,,724,—H '! (24) V L (Z, 


неа) VeL Vaal): 
LV aL V a L Хз, Аль 


~ 


valizi Š sgi | 


ЗИ: H БЕМ ВЕНЕ ЗАРЕ, ЕШ 
н(2,)= УЕ мы 
KONE Ü Xn,^n 


gH. Epit. ЗЕЕ М Ну уе 
ster ШЗ, Uk E H(za) 的 正定 性 。 УТИЧЕ Н ЗЕ а 
ВИ, AED ERIBE VaL 和 CY 0) СУ хха) СУ х0) ЗЕ 
奇异 的 。 
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习题 与 题解 


Lagrange AF EÈ 
3-1 ЗРЯ 07 ux 


minf(x) 
ВЕ (0-0 Ut , 
ЗЕЯ LO AMEGX.. А ВНЖ, 
[证 ] оК L(x*， ADRY Hesse Е, iun" 
[em] zr cite 
mego, МАЕ ° 
Го. (x o их” 


иж 5 НИДЕ pv" 
FACH: E YI 
3-2 xi— EHE BLUE RI Лх; M Кож, gov, 
和 为 台 点 。 : 
put) хи зл, kA XU mcn, Ех 
ИВЛ, HI ZEE 
тіп (х) = /(х%), B g(x?)—0 
-S RETES хо ad Gd A, PARERA E "的 
ZRA, LO, МНН ЛЕНЕ. PUER 
LO, A=minL (х, 3)28() 


其 中 хе 表示 对 任意 的 A. LOG XO x ИЧ а XT JV; 
зу у= рх —xt. ХХ g(x)=0 В 所 有 


-We 


% 的 集合 HU 
minL(x, MN)=minf(X)=/(x)=H(N") 
хеХ хеХ 


RE Н(уу=тїп LG,3)&min (х, AJ) Н (A?) 
xe E" XxX 


因此 
HOSH’). | 

ФИ НОЕ АДЕНИН. ЖА TERUEL (х, А) 
对 于 A" 邻 域内 的 任意 А, TERT x 的 НЕ ЛИН, 
则 有 

L(x* х") (к, A") 
同样 因为 x" 满足 g(x°)=0, Н 

L(x*, 4*)—-f(x*) 2 LG.) 
в; (хе, MALO., КГ (хе) 


这 符合 较 点 的 定义 。 因 为 左边 的 不 等 式 实 防 上 是 以 等 式 满足 


的 ， 所 EL Lagrange 冰 数 实际 上 有 一 退化 形式 的 鞍点 . 
3-3 确定 各 边 平 行 于 坐标 面 ， 并 且 内 接 于 椭 球 面 


GAHE: 
的 立方 体 盒 子 的 最 大 体积 。 


[M] HEWmHÉER хуг, Н (А. Lagrange № 
数 是 | 


bna een (EHEHE =] 
因此 有 - 7 
. ап. 


WES atu y'a eite o, ШН ВВ T 0, 
另 一 解 是 w+ 一 ww 3, -y*=b/./3 ,z*= 7 s ; 
A*—— bc/2Z3, ШИВ RR v* 三 8w 3 abc/9, 
3-4 求 二 次 型 | 


Г) = хх, 


Вилл, RO 


хі + х2=1 


并 给 出 几何 说 明 。 
[№] {E Lagrange 函数 
L(x, ,2,,4)2x,2; FACE x$—2) 


Л 


求解 (3.1)， 


aL 


ax, =% +H 2A% =0 = (3.1) 

èL = x, 2Àx,—0 (3.2) 
, 

2 一 好 十 x 一 1 一 0 (3.3) 


(3.2) 2 (3.3), dE (—1/ V 2 1/7 2) m 


КИМ, МИ 2 0HB BA E RII CS (= — 


* 8I >» 


ИВ IZ ) 和 (一 1 2, M 2) ЖЕНИ TOR SEG (E. 
Aion). 55 (A ER LE] 3-6, 


| i-8 

3-5 将 半径 为 ro 的 实心 金属 球 改 铸 成 实心 圆柱 (e, ЭВ 
使 总 表面 积 为 最 大 ， 试 求 园 柱 体 的 尺寸 。 

[ 解 ] 这 个 间 题 本 以 提 作 


min 2zrh4 27r? 
nh 7 U 


及 使 人 


itr АЙЕ Ж ЫЕ, hm. 
fELagrange ij 


L(r hA) c arl toar? A (rr? hari) 


2E 


jj =2лй-+{ zr --)2mrh=0 (3.4): 


AL = 2 一 ез Бу 
"oh" 2zr--ATr (3.5) 


e 82 - 


OL перс Wb, | k 
A no a 0 | (3.6) 


i(3.4)1m(3.5)08 8] В*=ок1, 03:6) 2%, fil 


ж 38 
r*=r | — 
(э)... Norte 


最 大 表面 积 为 ei). 2 


Ё > 
а 
3-6 用 图 解法 求解 
minxí-xi' s пет б 
АЖ (х—1)#—хї=0 зал 


[MÀ] 其 解 邵 图 .3~7 BUR. oan 


4-1 试 证 明 3-6 ШИ Lagrange ET TAPA. 
СЕР] Lagrange 函数 为 
L(x,,35,4) 9 хх ФАГ (х —31)$—5i] 
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pij A —2x,T3-3A(3,—1)* = 


ob. үх 
x, =2x,(1—A)==0 


Зе =G Da 


BREC, 0) MEE e K EB A, 
194, Jacobi 矩阵 为 


EA 3(х | 1)? | 0 
ХІ 177 
| 99 | = | —2X; In | Я 


ELA 


HETEL, ФАРА ЛЕН е 
$-8 2 АОН АЈ, FH n АЈА А m HP. 
Жи, ЖШ ЖЛ, RNA EDBO EBR ИРИ R a 


У X. 
[8] $ Р,= i RB P B) iB E 
P (P ,)= 9 i Dar P 的 家 本 
LG. eS Р.) вА O L 
虽 = 总 需要 量 EE mE 
现在 目标 六 mn 
min Trac 
пейдж, W 


ув. -цғ)=р 
+=: 
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Lagrange KAA 


L(P,4)= Ñr E+ | Ув, Р-р) 


# =} t=l 


因此 : 
an nn iama (3.7) 
3L Y», -L(P)— D=0 (3.8) 
"Ms 
fp maL, (3.9) 


iu L,—oL/oP.—1., 

因此 最 经 济 的 配 电 方案 是 开动 所 有 也 三 ， 使 每 厂 发 电 的 
ОХ K (dF [АРЕНА L; 2162 A, Wú 8 
的 选取 要 保证 满足 (3. 人 区 所 表示 的 总 条 于， 

ARA 35 3 

3-9 и, "mS 的 最 大 值 种 最 
小 值 。 

[M] XX 。 9? 一 1 一 2+ 一 y1，9 为 实数， . 
Lu L(x,y,^,0) 92x! — 3y! —2x c A(0* —1-- x! -- y?) 


ЖЕ. òL J= o—a4x—id2Ax-460 


PR 


02 :i 
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G) ово), ША 
4x—24-24X-—0 ` ` 
y(24—6)2-0 ' 

x+ y= 
有 三 组 解 . ud | | | И. 
x*=0.2,y*=+./0.86, às, [(х*,у*у== 9.2 
. m" «v (3.0) 
x*-—1, y*=0, 4*=-|, que, y*ř=0 (3.11) 
х*=—|, у*=0, A*-——3, fot y*yex (3.12) 
‚ <2) АОН), М 
4x —220 
一 67 一 0 
d4xiq 93-95 DE 
` m"=0.5, y*=0L 8*m1.95, Ки“, a~o. 5 `` 
HRR, Сс уунан н gute (0+1 : 7. Evo. .98) : 
Ab, EUAIEIHSÉE(-1, 04k. - 

-g-10 如 图 3-8 ККЕ pv 输入 
浓度 c.. 的 方法 ， 控 制 反应 器 茜 汽 的 输出 浓 麻 ec。 有 演习 选取 
Cin AT iz SUN, Sh : 

Tea + ИЕ (ев, + Tu 

Eg e=c, n Не" 
e EK 
这 里 cs 是 常数 ， Белан. 试 分 别 对 下 
ЯВ ЧН 22 R ЕН: 
(a) Ke, 
(b K-—c,—2 . | , 
[M] 光 用 等 式 约 束 消 去 c， 风 可 以 写 出 Lagrange 28 
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ЖТ: 
Lleian t, А ,0)— (сеа е7 с)? терде? 十 Cin 一 K) 


SE 
dE se афет еа) на о ` (3.13) 
б ete —e4)e* 2T =0 Е (3.14) 
AL. "eia K—0 (3.15) 
JAN "EN 
Эв” 204=0 | (7.16) 


(1) A-0(E99) = 
"m, Cia=ca l, 0%= K—ci, 
(a) Кес, Ë, ü*—c,—c.d1—71, В = 0 Е 
Ж, MAR Rx. ИСХ НИ, 
(b) м Kse? hj, 0*—c,—2—e,4 i —1, ШЕ 
0 ЕЕ, BUS Кеса, БИМ EXE 界 上 
(2) 8—0CHPZDE). Aiter =K, muB, EARRA 
QY =e —2, IA (3.13) 0. ER EUH 
e? *(e**—2)- T* —0 ` i G 17) 
.以 及 加 一 2(2 一 e277}， 对 (3.17) 式 求 数 信 和 解 得 到 了 
3-11 TET UE COE4E F; 
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(x4—2)? (5, —3)* 4 
ҳі=45, 
求 点 {X11 209 到头 点 的 最 大 和 最 小 距离 。 
[W] BD 
minx?--x2 
E 9*—4—(x,—2):—(x,—3)'20, И Lagrange pg 3x 
A 
L(x, xs, Aisa O=] tait A L0? r(x1—2)* 
+(x,—3)*—4]+A, [21 — 4х] 


于 是 有 

aL E "E A — 
ax Xi2A.(x,—2)T2À53;70 (3.18) 
OF Log, 2A (44 —3)— 4440 (3.19) 
9х: 

ÒL a 2 taa 

34, = (2) Gu-3)!-4—0. (3.20) 
wl 
ƏL yi ax, 

ЭА хү-—4х,=0 (3.21) 
oL — - 

ө 716-0 (3.22) 

(1) A170 

2x3x,—4À;7:0 - 

!—4—(x,—2)*—- (x,—3)* 

Дата? 


对 于 8 的 实数 值 ， 不 椅 在 满足 所 有 这 些 方程 的 解 ， 因 此 
+ 88 = 


解 必定 是 出 现在 下 一 种 情形 。 .. 
(2) 8==0。 从 (3.20) 和 局 .21) 式 求 出 二 解 为 《2， 1), 
АНИМЕ Ох) 5 M (3.86, 3.12) ОНИ) 
对 应 的 最 天 值 为 Kx 一 28.73。 
5-12 试 囊 出 满足 下 讽 约 束 的 可 行 域 
xiT«i«8 
—2s5,M xix 
x m | 4 (3.23y 
[№] И 39, НИС. 


补充 题 


3-13 EH 3-5 题 的 等 值 线 。 
4-14 用 Newton-Raphson ЖШ 3-10 М By T* 
3-15 求解 问题 
min [x ,—2]H- 1x;-—2 | 
В ау(х)=х,—Х7=0 
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9.00) xb txi—12-0 
3-16 ”去掉 等 式 约束 求解 问题 3-15。 
37 去 掉 两 个 约束 求解 问题 3-15。 
3-18 用 什么 方法 求解 3-15 Ext: 为 什么 ? 
5—19 л А, ВАЕНИ, ЕВ 
司 下 式 给 出 | 
HyxQxs(a bx, texi) 
Ax, xj 分 别 为 元 素 А, ВИ, TEx txl р 
条 件 下 ， 求 此 阅 体 混合 愧 的 混合 热 的 最 太 但 。 
3-20 Ж maxx,+x; 
Hf. xi-c4xj-i 
3-21 Ж max exp(—«i-r2x1) 
АЙ Ixebia—4 l0 
3-22 Ж шаҳ sinz, 0084; 
Hf x,—x;=0 Ts 
5-23 НШ max cixi 十 xs 
RB 4141525 
X, XV 
ЗЕНА с, EEU, ЭЛЯ? 
3-24 ”用 图 表示 出 问题 3-23 的 答案 。 


Bor 
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第 四 章 不 等 式 约束 最 优化 


第 三 章 中 介绍 了 Lagrange ЖУК, НЫЕ 
板 值 必 娶 条件 推广 色 了 包含 等 式 约 东 的 问题 同时 还 提出 了 
月 松 驰 变量 将 不 等 式 约 束 变 为 等 式 约束 的 方法 ,使 Lagrange: 
乘 子 法 也 能 用 于 不 等 式 约 束 的 问题 。 虽 然 人 们 很 时 就 知道 
了 这些 方法 ,但 只 是 到 最 近 ， 才 建立 起 处 理 不 等 式 约束 的 党 . 
备 理论 ， ЛЕ 195122, Кива-ТисКег 定理 以 严格 前 方式 ， 
就 不 等 式 约束 问题 本 身 提 供 了 -一 组 必要 条 件 。 这 些 必 要 条 件 - 
除了 它们 的 一 般 性 和 完备 性 之 外 ， 同 使 用 Lagranga УН 
WEE ES IBI A ERR ER ART АЕ, 


一 、 Kuhn~Tucker 定 理 


7$ 1E Se Ub Mn] S: 
min f(x) 

Ні g: 20, i=], 2, Го. 
其 中 x=(x,, Xy, tU, x. J" 
щ Жл St B @ HIE XE, HOP ARTE, DA. 
可 以 将 等 式 约束 转变 成 不 等 式 约 束 , {ж ТЕ E, #3 
НЕЕ ЛЕЖА, ХАРИНА 
绪论。 跟前 几 章 一 样 ， BIE Ко д, (х), i=1, 2, 
en, rn, ПН, 
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证 明 Kuhn-Tucker 定理 的 必要 条 件 , 首 先 要 定义 一 个 
类 位 Lagrange Ж (Lagrange-Like function) fi Вх 
Lx, of) Z A g (x): 
HRE Lagrange 独子 A, 存在。 那么 满足 
| minf(x)— f(x*) 
且 使 g (x* so, iz, 2, US, r 
$94 x*, 下 列 条 件 必须 成 立 ， 


of (x*)-- X 41-99 (4*)—0,j—1,2,,n (4.1) 
{=l Әх, 


дх, 

9, (х%)=0, i=}, 2, ,fr (4.8) 
(A1)g.(x*) =0, i=], 2, =, f (4.3) 
А150 +=1, 2, ==, Р (4.4) 

ЭЖ FP) 5 ЖЕШ ЫЕ 25 pÚ 
VI L(x*, A*)=0 (4.5) 
Vallar, Atd (4.6) 
(A*)7g(x*)—0 (4.7) 
A* >> (4.8) 


ДЕН Kuhn-Tucker 驻 点 条 件 , 稍 后 我 们 还 会 看 到 
Kuhn-Tucker ERP RR ARFS- ER., 

ВЕРХ ИН да E ЗЛ, JEUBTTDHCEOR E IE 5 
并 不 一 定 是 十 分 有 用 的 。 具 体 说 ， 上 述 非 总 性 方程 和 不 等 式 
组 的 求解 是 一 个 难度 很 大 的 计算 问题 。 对 于 高 维 的 问题 ， 想 
通过 寺 裕 解 这 些 方程 来 求 最 忧 解 是 难以 办 到 的 。 

对 另外 几 个 最 优化 问题 ， 明 确 亡 述 这 些 条 件 是 很 有 益 的 
252], 
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例 4-11 ZH РЯДЕ Kuhna-Tucker 驻 点 条 件 
maxf(x) 
Ві g 60x20, i=l, 2, Á(€Ut, r 
[ 解 ] 这 个 问题 的 必要 条 件 可 以 通过 将 上述 条 件 中 的 
JORE- FORSE, Bü | 
_ ðf * г + д0 a = ... 
Эх, (х + А 0 )=0, jz1, 2, 


п 


= of * "е аку д9: Hy : = "T 
或 者 -wx (х*)+ z C-AD Эх, (x*)=0, j—1,2,",m 


政变 由 的 符号 ， 这 一 问题 的 条 件 就 成 为 


01 (x*)+ PEE 22 (х*)=0 j—1,2,-5, m 

(4.8) 
9g, (x*)=0 i=], 2, <, F (4.10) 
(Ра, (x*) 2-0 i—1, 2, =, r — (4.11) 
А0 i=1, 2, т, r (4.12) 

例 4—7 фк ЛБ] Ж Kuhn-Tucker & 

min f(x) 
Hf g,Cx*)zm0 i=1, 2, =, r 


(Ж) 对 于 本 题 的 情形 ,可 以 只 改变 上 一 题 条 件 中 g (х) 
的 符号 。 于 是 有 


д] * rat) 99: жү t as 
TP (x )+ > ( Ai) x, (x*)—0 j21,2, n 


g,(x*)m0 i=j, 2, ™, fF 
因此 条 件 变 成 


ðf (ue аж дй; (ужу = К 
дх, (х )+ > дх, (x")=0 =1, 2, =, 8 


J 
. (4.137 
gi(x*)zO  i—1, 2, =+, r CHES 
(1:29) =0 1,2, r . (4.15) 
Ax $e], 2, e. F (4.16) 
Pi 4-5 确定 下 询问 题 的 Khun-Tucker 条 件 
maxf(x) 
HE а, (хуро | i=j, 2, =, r 


GR 将 正文 中 的 问题 ,同时 改变 G0 gI E pe 


得 到 

of * * E: og; и 
— .(y*)— y д1-09:.0х")=0 
因此 条 件 成 为 


of * a #09; _ 攻 = i = А ... 
9х, (x хм PER (x ) 0 2 1, =s r n 


(4.17 

Оу фа, 2, =", r (4.18: 
90) =0 i=], 2, +, F (4.19) 
A:20 i=l], 2, w*, F (4.20) 


Bi 4-4. В Kuhu-Tucker 驻 点 条 件 讨 论 例 3 一 。 
min (x—a)?-F b 


县 使 хе 
(Ж) ЕХ 
L(x, A)e(x-—a)* kb AC с) 
UU 98 =1(а—а)у+А=0б (4.219 


aL 


A(z—c)=0 со ош, (4.23) 
850. 5. on 64.24) 


(а. З) E MR ARTE, СЕ Д9 m0 хто 
《或 两 着 同时 成 立 ) 。 НИ ПИТА" =a, Bi 
Ж . 

А*=0 E x° =a 
= *—2(a—x*) RH x*=oə 
ЖЖ, Ш арс, MUR. 

x*"-g $i A*=0 
dif асс, Wm dos 
0 和 Ate2(a—o0)«0 . 

这 里 得 到 的 解 与 例 3-8 中 得 到 的 解 完全 相同 。 也 是 ， 现 在 有 
СЕИ 


atxo 
我 们 看 到 它 是 成 立 的 ， 

Kuhnz-Tuckerlt AA def E КЖ, " O0 fl g, (х) 
JUN, АЖ. ДЖ, НЕ 
ЖЕФ ЖЕ ЕЕЕ ДУШ, TARRA., МГИ, ЖБ 
末 税 小 出 是 叭 一 的 。 


ENT: 


从 上 面 的 讨论 显然 可 见 ，4 很 类 似 于 党 三 章 所 讨论 的 
Lagrange 季子 ， 只 是 在 与 等 式 约束 相 联 结 时 ATE 可 负 ， 
当 语 示 等 全 约束 和 联结 时 ，4 必 须 有 确定 的 符 写 ( 或 正 或 负 仅 
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取 一 种 符号 ) 。 

前 边 我 们 假定 入 是 存在 的 。 现 在 提出 一 项 附加 的 必要 条 
Е, ПЗА, ТКА ВЕЛЕСА АВВ). 

ESI ВЕ XR he E, 使 得 对 于 每 个 紧 
(binding) AE. | 
` (Va, (x*), В) < 0 (4.25) 
也 就 是 说 必须 对 所 有 紧 约束 有 同一 个 使 上 式 成 立 。 

实际 上 ， 约 束 规 格 难 于 事先 检 蛤 ， 因 为 这 要 求 厂 关 最 优 
点 的 知识 以 睫 计 秆 。 但 是 ， 有 有 几 种 条 从， 它们 的 成 立 使 约束 
规格 总 是 满足 的 。 这些 条 件 如 ， 

1. 所 有 的 不 等 式 约束 都 是 凸 的 并且 至 少 存在 - 个 点 
x 严格 地 在 可 行 域内 部 ( 即 x 不 在 边界 上 )， 

2. 在 x* 点 记 有 紧 约 束 的 约束 矩阵 有 最 大 的 秩 (回想 在 
等 式 约 柬 问 题 中 ， 这 是 Lagrange УНАЕН А), 

3. SARREREK, 

对 于 包 合 形式 如 

g CO0 Ф=1, 2, +, г 

By 38 НН ЖЕ {АЛЫИ КЕ, ОВ ДӨЙ ERRA 
НЫ, НЕ ЖА (4.25)5 1, Ах [БЖМ HE 
Ж. 

ЖЕТЕ Н, RÉA ОЛА, ЁН. 
说 明 当 约束 规格 趟 满足 时 ， 在 最 优点 E Kuhn-Tucker 驻 点 
ЖЕ. 

Я 4-5 试 证 下 述 问题 不 满足 约束 规格 ， 并 证 纹 在 最 优 
ка 33: ЕТЕ, 问题 为 


min(x,—2)*?-- x2 
Fra 
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Hf& gilti, х,)=х, 20 
0.051, х) =X 50 
gan, xi1)7(1— 2125 —5,7:0 
(ND 从 图 4-1 可 见 ， 最 优 E 4151, xi—0. ER 
点 紧 约束 是 gelti ,X,)=05 gati, 02) 0, Е ПЕ 
ная 


f д, ` 
. 0X, _ 0 
Ve, 9- 3e. | [ij 
^ д5 1.2 
zl (1-х) 
- LESI = 一 3 1-х, - 0 
Yast, = доз | [ —1 | [a] 
0X; аа 


25 RORU SUR FEE eg, М 
(vg, (1, 0), h)2>0 

与 (yg, (1, 0), ћ)2>0 

将 内 积 写 成 另 一 种 形式 ， 就 可 以 得 到 对 约束 规格 的 某 种 几何 

解释 。 与 上 面 两 式 等 价 有 


ll VasC1, 0) | ИВ с099,< 0 
Il Vei, 0) И НВ || соз <0 


Жү 0; eye, 0)598 h ZÍ ЖН, Ө, Я Уаз (1, 0) 
h ZERKA., ERR h 只 要 有 co, 770810080, 750, ВІ 


—90'«70,-90" d1—90'«:0,-:00" 
“ 97. 


x, ` 
S -ЯНЕ 
1 у(х, А) = Ü ; 


50 ' 
. m 4—1 . 
上 画 的 未 等 式 显然 成 立 。 但 是 ， 没 有 一 个 h 能 使 两 项 要 求 所 


HAE, БЕЛ ЕК ЯЙ (ДИЕ А-2), 
TELD 


У: 1,0) 
图 4-2 | 
НЕ х*=(1,0]7„йв(Х,,Х,)1®0 和 g, (x , x 126 
Е Ж. 


[gz 99:7 


Cs anj rooi 
JT 1, 0)= == 
( ) | даз даз | Lo au 
- 0X, QXg 1,0 
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HRH, BE, 果然 如 比 预料 的 ， Lagragh Я т Я 
-在 。 B EI 
9-4-6 XT 4-5, Жажа жя 对 于 
XKuhn-Tucker джем, РЕЖЕ, 
CHI ТЕ Lagrange Hc 
L(x, Me, —2)* x Tanam | 


TÀAs[C1—x,)3—x4] ` 


必要 条 人 性 是 
0L NEN 
—2(x,—2)t 2, —3(1—3x4)?4, 70 (4.26) 
2х1 
Db cas ji Ao | эв (4,27) 
xi220, хыз, (1-3,)'— 4,20 (4.28), 
_ А5190, AZ =0, AM (1—x1)* —5,]0 
DTI б i . (4.29) 
#50, isl, 2, 3. | (4.30) 
=(1, 0)/Ё, RU. 35 得 出 ， 
Аз = ` 7 NC ' 
ҸЕ {4.2944 - `` ` 
Ат==0 


APERTA, МНЯ ЛОКИ E Kuhn-Tucker 条 件 ， 


=, RaR 


Kuhn-Tucker 驻 点 条 件 有 两 个 缺点 .(1) 对 于 非 四 的 
` "09 ta 


fO g (x), ERES XE dp PE, (2) R A в Ноя 
один, 

如 第 三 章 所 证 明 ，{x*,%*) 吓 Lagrange ИЖЕ, 
Kubhn-Tucker. 驻 点 条 件 也 可 所 用 上 (x, ARI ER PER 
定理 4-1 5O, А), "20 BERE (E F) 的 
Lagrange 9 L(x, ШЕЯ, MEG 

1. хеб (х, ABATA x BUR, 


2. 9:(х*)<0, i=l, 2, UC, r 
3. Atgi(x*)—0, i—1, 2, =, fr 
JS) RE ХЕ 

min f(x) 
НА о, (х)<0, i=l, 2, "Г 


BE xefs хо, ө, 9), FOI ge GO E SCENE, © 
BO xxu HEC UH ur PEERS PERS EDR. EXP ERI 
ТЕЖ x*X Lagrange HUS) de ELA, T EE APR 
。 该 定理 将 在 习题 4-11 中 给 出 证 明 ， 
为 了 建立 确定 Lagrange pi ЖЕҢ) c e ЗЕ FE ЖЛ] 
题 二 者 之 问 的 联系 ， 需 要 下 面 的 定理 ,. 
定理 4-2 ”如 果 点 (x*，X*) 是 与 原 问 题 相 联 的 Lagran~ 
ge BEL BE SR, HUI x* 是 原 问 题 的 解 。: 
该 定理 将 在 习题 4-12 mi B. 
如 果 gs Kx 是 凸 的 ， 又 至 少 存 在 一 信 x 严格 地 满足 所 有 
不 等 式 (也 就 是 g. 0x0, бер 2, =, r), ПАА 
《定理 4-2) 既 是 必要 的 也是 充分 的 ， 加 于 x 的 这 -一 ВЫ 
约束 规格 的 一 种 形式 ， 
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这 两 个 定理 的 主要 优点 ， 是 给 出 了 求解 不 可 微 非 中 最 优 
化 问题 的 充分 条 件 ， 由 此 产生 的 计算 问题 E ОЖ B£ x ЖЕ 
《x， 和 *) 的 全 局 极 小 值 。 有 许多 直接 搜索 法 可 以 用 来 完成 这 
一 任务 。 当 然 ， 这 一 求 最 小 什 问 题 的 困难 是 它 要 求知 道 4， 
而 和 4 一般 是 不 能 事先 知道 的 。 这 一 鞍点 关系 ,将 构成 在 第 
十 三 章 中 所 讨论 的 Lagrange 分 解 和 一 个 计算 算法 的 基础 。 


四 ,对 8 


对 偶 概念 在 线性 规划 中 是 十 分 完善 的 ， 且 让 此 导出 几 个 
很 月 效 的 线性 规划 的 计算 算法 。 对 线性 规划 及 其 对 偶 定理 的 
简单 介绍 将 在 附录 中 给 出。 

非 线性 规划 问题 也 有 类 似 的 对 侦 理 论 ， 但 是 ， 对 偶 菲 线 
性 规划 通常 比 入 应 的 原 问 题 难 解 得 多 。 若 与 出 现在 原 问 题 中 
КЕПЕ, АЕ SBY LR AANA 
法 。 这 些 内 容 将 在 第 十 三 章 中 进 -. 步 讨论 。 

在 非 线性 规划 中 我 们 定 关 对 偶 钞 数 为 

KM)=minL(x, 3)" Vo 
其 中 工 (x，》) 的 极 小 化 是 将 》 作为 回 定 参数 还 对 所 有 的 x 进 
行 的 。 我 们 注意 到 极 小 点 x 或 许 不 满足 约束 gt(x 扫 0，、 
# 一 1，2。，…，7, 并 且 事 实 上 , 极 小 信 或 许 不 是 对 参数 А 的 所 
有 值 都 存在 。 现 在 定义 和 的 集合 ,使 L(x，%) 关 于 x 有 有 限 
BEAMER, BU ` 
рв E B X20) 


在 定理 4-1 中 我 们 记得 工 (x，》X*) 的 极 小 点 为 x*， 现 在 探讨 
AURI АСА) ЙЕ А", ЕС 
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定理 4-3 МРЕНИИЯ g OJS 1, 2. T 
Bx, КМА CD, д Ж АОЛ) Сх). пали 
вата FOOTER. 

pi Ep S 


h(A)e minL(, ЕО, A) 


或 КАКО +, 2.00) 
ЖИБЕ, х E a CO0, i=l, 2, ++, T R AU, ZB 
Ж . 
Ss 00«0 
ш А(М)=[(х) AED 
XB ке xg Go, imi, 2, <, r] 


(GERE) 
XERRA ORFE, ПА T Rz 
ACE РЖ, YURGEXUHBIR RUE 
maxi) d 
‚ ЖИ 4-4{ 对 侦 定 理 ) 点 (x*, лә тИ Хаарга 
пред, SENA 
‚1. x* 是 原 问 题 的 解 。 
2. ‘ЖЕНЯ. _ 
3. убх) =) 
定义 下 列 术语 ， 
ИВМ. 
min f(x) 
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HB 9:00 <0, iSi, 2, =, 7 


Pe —— чы тт = s — - oos w. — бн 


х=[х\, Хз, "n, ST m x 
且 了 (x)，g4(x) 是 实 信和 函数， | 
Lagrange ЖШ, 


Lx, VIOE Mis (x) 
对 偶 画 数 ， 


А) = minL(x, 人 


>= fu pgz, азы) 
对 偶 问题 
mr 


这 一 重要 定理 在 习题 4-15 中 给 以 证 明 。 
РЕЗЕРВЕ НТ жыня, 这 对 于 
设计 计算 算法 是 有 帮助 的 。 
定理 4-5 хаш 用 入) 在 它 的 定义 域 D 的 任何 AF 
集 寺 都 是 凹 的 。 

本 定理 的 证 明 在 习题 -16 中 给 出 。 O : 
хв, ТЛЕ, ETM 
优化 问题 中 将 是 很 有 用 的 ; 这 些 结果 或 是 ， 必 = 的 或 是 完 分 
的 ,或 者 是 完 分 必要 的 ， 宏 们 依赖 于 画 数 有 (x) 和 MCN 
4 二 1，2，*…，? 的 性 质 。 为 了 方便 读者 ， 将 这 些 条 件 (关于 

Жад) аф | 
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ЖОЙ т E 34-1 
1 а B 
Р(х), EGO | (G0, а(х) с. Ж.д - & = 对 d 
"DAP | Bm | & 从 条 d 条 件 
可 m | e PH BEE BEE 
| 充分 分 充分 
Я! RER 仅 必 要 DE DLE 
TER д 不 能 必要 且 йен 
i ГЕЙ} 充分 | X4 
CEDE IUE HE): 
жак RE 不 能 仅 充分 | ЖУ 
| | D М, Ë . - 
习题 与 题解 


Kuhn-Tucker 定理 


41 不 用 Kuhn~Tucker 4f, WETA 问 题 极 小 的 
必要 和 条件。 问题 
min foo i E € | | 
Вх: 20, i=l, 2,сгуп. у 
(WD MERCER Ki AAA BS ЖИПЧЕ А. 
хер ГОДЕ, Taylor Я, = se. 


foci) e Gy iod 3 oak 
TIR AX) HG +6 Ax) Nx 


KH H 5 Hesse ЖЕ, Н0<0<1. 
要 使 x* = 要 求 
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JA, 


f(x) f (xt +h Ax) 
T TT E 


БӘ Qr) axe E AOTH ОВД) АХО 


M 


dii 


出 此 


EE 


арка, ШЕ xt ЕА, Bl х*>0,. 
那么 上 基本 不 等 式 即 可 导出 一 阶 必要 条 件 

A (х#)=о, j=1, 2, e, m 
amam aqnu XA. НЕВА Ша, 的 最 
优 值 在 边界 上 ， 即 ** 一 0。 那 么 设 其 他 各 部 分 均 为 零 ， 则 基 
本 不 等 式 变 为 


xL Qc) Ax 20 


НН 7g х;=0, " 必须 是 正 的 ， 由 此 得 到 必要 条 件 ， ES 
ХЕ RGhERxi-0 E, M | 


21 (х*у;о 
因为 在 最 优点 为 内 点 时 ， pem 政 可 以 写成 
xL (x50, 9=1, 2, UH 
ауаз, Та 即 得 ,。 
1. VFO) 
2. (же) "V f(x) —0 г 
3. x*2] 


从 图 4-3(q) 我 们 看 到 ， 上 述 条 件 是 合理 的 ， СЕТУ 
FP, ОЛ (x*) /дх, о, рр ЫЕ Д 220, 
使 f(x) 有 更 小 的 信 ， 这 时 xT—0 就 不 是 最 优 的 。 为 完整 起 
见 ， 另 外 次 种 可 能 的 情形 表示 在 图 4-30), (c)rR, 
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£ (x) 


边界 点 解 一 在 边 、 _. 
FARERNE “ 5 


4х} 


图 1-5 


4-2 证明 Kuhn-Tucker 驻 点 条 件 (4， 5)-(4. 8) 
(М2 对 于 问题 


max f(x) 
В g, (x)<0, i1, 2, =, т 
RHE Ao SERRE THER SEE E 5,220, 将 不 等 式 约束 交 为 等 式 
Ж, 于 是 有 ' 
sı +g (х)=0 i=l, 2, = f 
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8,270 
现在 作 Lagrange 函数 О 
L(x, з, О Zeta) + 
把 第 三 章 中 的 必要 第 件 应 用 于 xX， 和》 并 把 习 题 4~1 中 建立 - 


欧 必 要 条 件 应 用 于 非 负 性 约束 5 Е, т 可 得 如 下 结果 
从 第 三 章 可 得 ， 


oL ү o. Ж. Jh iof. ; 5, Ф ag M ES 
3x, (ct Mee Gy zai) 


j—71,42, Ue В 


L 
conn nette on. 


a ч 
MEI 


i21, 2, ==, т 
Ate 4-1 可 得 ， 

; ГК {а ое 
91 сд, st, Re) 20, dioi, 3, =, г 


M S. Ле) =8# А10, . 11, 260", 


$120 i=l, 2, eT 
在 上 述 等 式 中 消去 st, 得到“ 
z Qi.) X 2159 St (x*)-9, jen 2, Uu 


Lene i-i 2 т 
ан) =0 i=l, 2, ==, т 
А: 20 i=], 2, Ue, Y 


ЭХ Е Kuhn-Tucker ARH 5)-(4.8), 
4-3 试 对 问题 
min f(x) 
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HE G, (x)<0 i=), 2, e T 
x 20 ј=1, 2, t, H 
建立 一 组 Kubn-Tucker 条 件 。 
(D X Lagrange EOS 
LG, s efe 2,6943 2, bx, — 
NBAZERE 一 


‘у 


XE LE E Loariad an 


' Tad E j=l 2, Tea В 
Hjx;—0 WD ' 
市 消去 д", 。 剩 下 的 必要 条 件 就 不 再 是 4* "ГТ 现在 另行 
定义 


L(x, =) +, 448. о) 
则 上 述 条 件 可 以 写成 
Aeon À*)c — 95220. je 2, on 
OL rua ae уж 
Frons Ае) хў=0 
现在 变量 jj 已 从 必要 条 和 件 中 消去 ， 条 件 概 括 如 下 ， 
WVa.L(X*, M0 SZ L(x*, OLD 
(x*) V,.L(x*, k*)=0, TVL, 4*)=0 
х*—>0, AÀ*O 
4-4 ШЕЙН] RERO DURER SEA I 
问题 
тів (к) S, S, 08, 


S,-(E") 
Sentio 0, i=1, 2, e, Пи} 
= јо, (х) 0, m1; 2, 9 m c 
"A x ES n ЕШ, ЈО), ибо 2, (x ZEX 
ДЕ S, 上 上 的 实 值 函 数 且 处 处 可 微 。 | 
жў, UU 
Lx, X, в)= =f) E Ау ura GO 
必要 条 件 是 
: VL At, и"), 90) = 0. 7 
х*>0, wt) : rv 
QOO" VUL, X55 aet, Свето) | 
w(x*)20. lbs 
4-5 使 用 Kuhn-Tucker Жу Ж}, AR RE [i Rt 
mia( f(x) = G5 1)! (x4 —2)1 
Hf xQ,—x,—1 
x Lx, =<š2 
x 220, x,20 
并 对 管 案 作 图解 检验 。 
(W) 必要 条 件 如 习题 4- -4 B. 
ЖХ 
LQo А, д) = (х1) (х2): c T AG 
—x,— D -a(x, 495—2) 


HA 
OL yx —1)-- +20 | (4.31) 
Bx, 
AL —iGu-2) A RO | (4.32) 
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3,20, x4220 О (4.83 


i203, 71) A a ]—0 ‚‚ - (4.34) 
Xs[2(x4—2) +А+и]-0 (4.35) 
X,xi—2«0 | ， (4.36). 
#0 E (4.31) 
HDg.x.—2)70 о. (4.88) 
X3—X,—1—0 (4.39) . 


НТД, ARE x40, 24750 和 dO, АЕ 
(4.34), ч. 35) 和 (4.39)， 即 解 С, 
"c (РА $0 . 
2(x,—2)+A=0 pe + 
et Ne Ват). спо. 7 Bt 
得 到 X1—1, x1=2 RI 4* одеяния а 
(4.36), HI 
142—250 或 150 
ЕЖЕ aA F HB (4.34), (4. 35), ч. 38) 和 (4. 39M 
联 立 求解 
X, +x,—2=0 
X= x —1=0 (os o8 
2(3,—1)— 4+ 4—0 
2(3,—2)-- A--4—0 
得 出 | 
x=, кйш ‚ #"=1, )*=0 . 
和 f(xi, xp-L — 
#8 (4.33) (4.37), RHAH 
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Жї э, x¥ 0 ЯП 5o 
AENEASE. ЖЖ ЕН 4-4 Н, 


x-a -Г 
Fl T t 
(1.2) “无 约束 最 小 , ttg 


| 3 
y y! Р ША. f* = 一 


El 4-4 


4-6 — g, НИ ш х= 
{х,, Xi, з, 20И, жаш пк 型 和 观测 数据 的 误 
СА B. | 
B СА P - | (20) 
Anu б, КА 

Ф, =, " 2 , ` 
LIMES i Voss T 
ILS EDU ET EN НЕ, 
АЖЕН ЖН Aul #3220, jul, 2, som 
(a) £&ipK uhn-Tucker EARP, `. 
(b) xi 本 问题 这 些 条 件 是 必要 的 ? 还 是 充分 的 ? 还 是 
充分 必要 的 ? 为 什么 ? 

(c) 说 明 如 柯 求解 Kuki- _Tucker 条 件 以 求 得 最 估 ex? 

их 


СЕЛ 把 多; Ал (4.40)га 5] HJER EEL ГЕ BI 
nin[ro9 Ж [Аб ур] 


НЙ х,>0 j=1, 2, om 
(a) МЫ 4-4 知道， 必要 条 件 为 
У.Р(хеу>0 
(x*)FV.,F(x*)—0 
х*>0 . "x 


ШН, НЕД j—1,2, e m Ж 
ao, уур) 0—-09)= =0 


х9220, }=1, 2, ic, FT 


或 者 有 


B, fot. з-д, 6m 


x$50, j=1, 2, ^. т. 
(b) 虽然 自 标 函数 作为 f(x， y) figi л Ag qu 
为 X 的 涵 数 却 不 一 定 是 凸 的 ， 除 非 对 СО, yi) 作 某 些 规定 。 
因此 Kuhn-Tucker 条 件 仅仅 是 必要 条 件 。 
(c) 于 面 给 出 一 个 求解 这 些 方 各 的 算法 。 其 中 方程 
о, 
以 了 代表 算法 为 | 
1, Ex 220, j—1,2. m 
2. 利用 Newton-Raphson 法 或 其 他 适当 的 算法 ， 对 
所 有 使 PORT, PETI 
3. 如 果 对 所 有 的 j, x120, УЖ, 
ШЖ НА х0, о, 并 从 联 立 方程 组 中 去 
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TI, 2. 
БЕРИ УТРАМ, | 
ECC BEBHIEXTT- EE ERO ВА C /(х, y, урсак. 
4-7 解 问题 
max х 
Е (х2—4)2—25<0 
(SU ЕХ 
L-xvAL(x*—4)*—25] , 
ч БЕ E M pr | 


n4 


^ [23 


== =1+2) (x —4)2x= 0 | 
(x? —4)!—25«0 
А0 


A[(x*—4)!—25]—0 
Erc, ATASH 


 1+4Aw(x2— 4)=0 f (4.41) 
(4—4) 250 ^ i (4.42) 
由 方程 (4.42) 得 到 
x?—4= +5 
х= +3 
RARAC. 41) 1498] 
如 一 一 -起 了 So 
所 以 
x*-3 和 和 一 一 中 
RH — 


4-8 ТЯН. ШЕЕ Kulhn-Tucker $ APERIA 
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Am, A4 
(V f(x*), h)z0 


[证 ] 对 问题 
min f(x) 
Rë gi (х) 0, iui, 2, om 
# , 


L, DESO È 4 0, (x) 
HI s 
V.LG* A*) e К) + E АДУ а (09) = 
只 考虑 紧 约 束 ( 因 为 否则 有 41=0), HEAR 
(TL, A. b) 
& (fo, D) E 2107.0 (x°), Do ， 


BA буроо), h= 2 Aa), h) 
但 AO | 
Win £r W I 


(Уха: (х*), h)«0 
Bu 
(Tafit), h)mo 
4-9 1882 TALES EUG ЕЯ 格 不 满足 。 
题 为 


-— 
Hi 


max x, 

EB gi(x,, хр) = (x4—2) (х, 7 1)! 0 
9361, x) (x11)! —(x,—2) 0 
1220, xi 


ца: 


{证 J 从 图 4—5 HB, С, 2), JH 


vnu 79). 42)? 


v.s as [GD =[_ J 
Я 
Го, dy de E to cid о 


E hao —h,«0 


В 4-5 


ха етей, Вилен З, АИКА Е 
AERA. PARRE B TUE, | 
4-10 PT Bj Ed SJ ER Ra D] А 4-8 的 不 等 式 
EFRY, 问题 
min ях, 
HË gn, =, 0u-2)SC. 
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9201, x4) —3x,—(x,—2)«0 
an AR 4-6 我 们 看 到 最 优 解 是 (2， 0), +8 


V9: (2, 0)= | 1] 


Vef, 0)= 
为 了 满足 约束 规格 ， 必 须 有 
IZ xg #h| 089, «0 | 
5 PV xgs| [h || сов, <0 


У ан (2,0) = -[- | 
Hn 


90* «0, «— 90° 
90° B, —90°Ф 
任何 h, 严格 在 可 行 域 S 内 部 EISE :这 两 个 条 件 ， EE 
Dep Е. 现在 ." 
IVF ИВ || совё;>0 
IDR ' 
” —890°=6<90° 
虽然 每 个 严格 在 S НИЕ д. 
dk dE 
4-11 证 明定 理 4-1, NN 
[证 ] 根据 鞍点 的 定义 
L(x*, M)&L(x*, К) (х, A*) 
T ЖШШЕ, MARG, Ак) Г(х, DARSE 


Ф ХИ. Ча 02 在 90* 与 270' 之 间 一 一 滩 省 注 ，。 
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8 4-6 


Àà*m0, ИЛ £f 132 3 ЖМ. 
Hi. S B ДЕ АЙ Siti es EIS € ° 
x* f L(x, A*)HBUR x 取 极 小 。 
展 疗 去 边 不 等 式 ， 得 出 对 所 有 的 №20. 


f) X Аа, GP) f) X Ai. Q0) 
fal = А 


或 $ (2. -Mg (х9) «o 
现在 ， 如 果 有 g(x*) 臣 正 的 ， 则 可 以 选取 相应 的 和 足够 
大 ,使 上 述 不 等 式 被 破坏 ， 涯 而 条 件 2 必须 成 立 。 即 ` 
g,(X*) &0, £—1, 2, +=, T M 
О ЯА HERZ, Wu 
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- X tg Ge) 0 
或 等 价 地 


E Аа, (x*)0 
zm]. 


但 是 由 于 AROM gs (x*)<0 Ж 
Аси (хе) <0 
要 同时 满足 这 两 个 永 等 式 ， 只 有 
Afg,(x*)--0, ict, 2, =, T 
这 就 是 条 人 ?3 。 ， 
为 了 证 明 充 务 狂 ， 我 们 必须 证 明 由 这 些 条 件 潍 鱼 的 (x*， 
XE L(x* АМ, 
由 条 件 1 立即 得 出 对 所 有 的 x 都 有 
Lr, х+)<1(х, ^*) 
这 是 鞍点 定义 中 的 两 个 不 等 式 之 一 ， 为 了 证 明 A 个 不 等 
式 ， 可 以 把 
LG*, DSH X A a (x 
展开 ， 然 后 从 条 性 2 和 和 ,0 得 出 
Ai (x*)=<o 
B) — . SF) 
ЖЕ 


(к) =", А) >. 
ЯД, ЛИЕ, 
4-12 证 明定 理 4--2。 
“证 1 С”, A*)E Lagrange МЫ XA. Ш 
理 4-1 成 立 ， 并 且 x* 满 足 原 问题 的 不 等 RAR, РАЯ 
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-证明 
fo» sf), 对 所 有 x 
АЁ а, (х) so, i21, x Ө, т 
` AGERE AT, x — wx 


fa) Z Mo, GG) + z 42g 0) 


TE 4-1 的 条 件 3 ， жахли fe). 现在 对 于 满 
JB gU) «o 的 任意 x， 因 ЖА о, 451,0, 66, в, № 
иж 
EETAOES 

-于 是 不 等 式 可 以 写成 

f(x*ys fo 
АНЕ gy GO 0, $1, 2, ir Вуха, 

4-15 FARREA 4 一 6 E NES Kuha-Tucker 条 

Ёз 这 点 是 不 是 Lagrange ШЖ sio 问题 为 

min (x—4)* 


RA яке 
(Юз 将 约 东 条 件 写 成 ， 
g (x)y=x—s =< 
9 (x)=1— x50 
b Ех, ài, A1) m (x—4)*- A1 (x—8) FA. (1-7) 


Я EI 25 


ә =2(х—4)+%а—5,=0 
x<, xl 
ASÀ, 550 
„119, 


Ai(x—6)—0 
Аз(1—5)==0 o- _ 
Же kE, RATS k =Ь—4, A70 HERRAR. 
HEPR Гавгапке зле (6, —4, of ЕА. Е 
(Аа, Аз), 关于 № Hesse dB ER ОЛ. 
PL | 
XERA., Mey x, в, —4, Е занк 
ОЕК р. 
25 [i Же КЕНГ, НОВА Е ЖЕ 
В) = maxL(x, k) 
Н L(x, да, ADEG, —4, 0) SCREEN BLA, ИДЯ 
EER x SEA ЖЕ, Bit E Hes, | 
RK, хеб ЖЕШ 点 条 ph, BUR Lalirànge- 
ИШ БӘЙ, DESCRI A n BC nf ИПЛЕ 
FE — gh В ЕЛА, H AGE RE Sik RUGER, 
feux BERG ШАНА, ОСЗ Е, 
4-14 ХНА 4-5, ТЕ 
L(xf, xš, À, mL, Xn, ве) 
XL. x. At, д") 
(E) AHA а-5 得 到 | 
Lizi, ta, А, B)=(x Го, 
—x,—1)- а(х хо 2) | 


—4, 0)==22>0 


LOS, x$, А", и*)=(-5:) +(-1)'= ; 


2 
H | | 
LG, хз, X*a*) (5-1)! Gn 2)! x i — 
| ` +x;—2 | 
1 
A 25-1) 120- B 
2E. 200—2) на NN ` 
ч 
Bi a o3 
u | MN Ё; + | kara uU " 
ШЙ LG, xa, 2", нку) Hesse SER 
не 5. Sg 
2. 46 2 
dB mul Yu) 
ЖЕНЫ, mua, 2)8 £64. x, A", и de 
ЯЛ, B j Uu. “ш "UU. Soc 


LGT, x1 t; ut) Ex, ү Aa; ey 
пажада С “+ 
AQ, B)=emin L(x,, zx, A, д) 


我 们 有 
oL 
"Ou, 2 D) Adamo 
因而 得 到 
x,—d ta) 
x 92 —2(x;—1)-A-48-0: 
得 到 
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X,—2 +n) 
我 人 到 LG,, x,, 4, в), Ж 
| hC, у= - LO а?) +и 


_ #8 A*=0 和 и*-=1, (ХА, д) Hesse 矩阵 是 
—1 07 
p=| ` 0 M | 
因为 一 上 是 正定 的 ， 所 以 A*e0, де: RRA, дуйн К, 
这 样 一 来 EE i | 


ВСА, a) L(xl, xt, А, n) 
mL(x,, ха, À", a*)—h(A*, е) 
sis. `. 

4-15 uEBIX Bg PECES 4-4). 

(WE) 为 证 朋 必 要 性 ， 括 设 L(x， 入 ) 有 一 个 鞍点 (x*， 
2°). BARZA 4-1，x* 是 原 问题 的 解 ， 这 吝 证 明了 条 件 
1 。 | 

由 定义 ВСА) = minL(x, à), Ж 


ВА) m fo) X Ма, Qn) 
但 Afg,(x*) =0, i=}, 2, Ut, T 
由 定理 PEE 
пме) = fat) 
因而 条 件 3 成 立 ， 更 在 由 定义 4-3， 有 | 
SIGRO), 对 所 有 和 4ED 
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И; At ACIE D ERRA., 这 就 是 条 件 2 。 必 要 性 得 
ФЕ, | . 
为 证 明 充 分 性 ， 必 须 证 明 条 件 1 至 3 可 推出 L(xX，X) 有 
一 个 装点 (x*，M*)， 或 者 与 之 等 价 的 定理 4-1 的 条 件 1 至 
3 成 立 。 | 
хан аня, Bg.) он лс, (х9) =0, 
—1, 2, +, v, ЖИ E Е BÉ 4-1 Hp AR (P2 з, X H 
М ›* ЖЖ] И НИЯ, ЛТД УО, $—1, 2, =, т, iX 
ЕН 4-1 中 的 一 个 假设 。 ЛЕНТ ЛЕНА DOE, 也 
就 是 要 证 HE LO, MRED. 

为 了 证 明 这 一 点 ， 我 们 沈 假 设 结 论 不 咸 立 ， 妈 假设 存在 
Ж х ух", Ж 

L(X, eLO”, X") 

由 定义 . | 
Б"), м) бу + 2 ма, (O 


Ою) X ма, Ge) 
ВН, RK(AT) = f(x"), BIA | 
| Z а: (*)>0 


“ез 


但 是 ， 困 为 X* 是 原 问题 的 解 ， 所 以 A79, О R E i FP 
Ж. НА x=x*, З Нх* La, Ел xx pe m. 
定理 4-1 МЕР. КАНЕ, | 
4-16 证 明定 再 4-5 . 
(1 设 D* 是 D 的 山子 集 ， 考 虚 D* 内 的 任意 两 点 ， 雍 
如 说 X!，A*， 那 么 在 连接 此 二 点 的 线段 上 的 任意 一 点 和 可 
* 123. 


以 写成 
А = 05. +(1—а)А? Osa xl 

GÀ ре рур, Aa eD, : 
НХ. | "U 


ВСА) = тіп (х, А) 


AE А (х, AYXTA 是 线性 的 ， 所 以 
КСА) = тіла (х, Ааа), Mi, 
xad! 
dB, ОЛМА АУР T SPI, "E 
min[aL(x, А!) (гау (х, MI 
zzaminL(x, à!)ct(1--a)minL(x, А?) 
АСА) аА) (1—0)hC3?) 
ХНЛ) ре 上 的 癌 函数。 
4-17 ЖРА Р, АНЪАНА р. Ні 
minP-maxbD. 
P. min(—x'—x*), А х1, 
(М 因为 此 处 约束 意味 着 xe[ 一 1，1]j， 从 图 4-7 È 
: 易 用 图 解 得 到 x* 一 1]。 现 在 作 Lagrange iX 
Lis, A)=—xt—x)+A(m21—1) 


D E Ph 2 " ' 
— = 一 2 =n . 
9x 2x —3x? + 2)x=0 (4.43) 
x?xll 
AZzÜ 
A(x? —1)20 
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如 果 4 一 0, 则 x(—2—3x)=0, BR = P sco, 


ййх=1, M a= 3. 


Fix) == x - xà 


图 &-т 


如 果 x 二 一 1， 则 4 二 一， 不 满足 多 >0， 因 此 有 三 个 可 
ЖЕН. | 
| u 


2 
= x == А 
3 9, 


:相应 地 有 
Цв 0) g ae oss tis) 


TUA at—i Bf, EE L(x, ил, ЭК S PR34225 Rm 
一 致 的 。 
出 (4.43) 式 可 知 ， 当 < 天 0 时 


оба 
x=. (4—1) 


125 • 


КА L(x, уй, 59] 


= _4 За. 
K(A)m——A'— r 5 A 57 
JAIME 
max Á(A) 
且 使 a20 
这 时 
ðh _ 4, 84 5 
dà Ө" gg™0 
由 此 解 得 
Е 
А iH 2 
. ТЖ 


КО 
B fü)e-i—it-4-2 
ха 
4-18 Жар а 
a min (x,—1)2+(x,—2)2 
8% n 
х.х: 


XQ, х:20 


SERIENE, ЕН f(x kO. 
4-19 Жїл 
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хага 
2Х,+ 5,255 
的 最 小 距离 。 图 解 之 ， 并 证 明 在 极 小 点 处 驻 点 条 件 成 立 。 
4-20 # Kuhn-Tucker 理论 用 于 线性 规划 问题 


min с?7х 
x 


且 使 Ах>Ь 
xc 

4-21 写 出 问题 4-20 ph Lagrange Д, # 给 出 对 偶 
问题 。 

4-22 研究 在 下 述 问 题 的 最 优点 上 KK sha- Tucker ER 
条 件 是 否 成 立 ? 问题 为 

max x 

Ef —x*mo, 

4-23 证 明 问 题 4-22 的 最 优点 不 足 Lagrange 函数 的 
鞍点 ， 并 说 明 为 什么 出 现 这 种 现象 ， 

4-24 下 列 问 题 是 否 满 是 长 hn-Tucker 条 件 ? 


min (x, —3)2 + x, 


жуя, 
县 使 —x,--(z, —1)2220 

Xi220, %20, 
4-25 在 问题 4-24 中 ， 约 东 规 格 是 将 满 吓 ， 
4-26 В Kuhn-Tucker 理解 下 列 问题 


max 26(x,—2)*! 4 (x,—2)* 
工 11 Ta 


HË x,qx.—2, x/—x,>—3 


Xi Tx,=6, X, — 3X.«22 
#120, x,=0 
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421 图 解 问题 4-26。 
4-28 试用 驻 点 条 件 确定 ， 套数 a, 在 什么 范围 x =4, 
X373 Ж ТУНДИ КРЕ ЫЕ : И 
ZEN max PIER 
1' Яр 
HE xbExix25 
Ximi 
20, x.20. 
4-29 用 图 解法 证 明 问题 4—28 的 结果 。 
. 4 -30 求证， 和 的 最 小 值 大 于 或 等 于 最 小 值 的 MEC 
ж ЖЕН 4-16). 
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第 五 章 一 维 捷 索 法 


这 一 章 我 们 讨论 最 简单 的 一 类 函数 的 据 极 小 问题 . 设 
f(x) 表示 一 元 实 变 量 x 的 实 值 淆 数 ， 我 们 假设 ОЕ KR 
La*, b°] 上 的 一 点 x* 处 取得 最 小 值 ， 一 维 搜索 问题 就 是 要 
建立 算法 寻找 x* и, ИВА, № 初始 区 间 缩 
小 为 一 个 包含 хе 的 较 小 的 区 商 Fgr， 加 ] FEl, bje 
[a°, 20] B x*c[a*, b^). & Sr x* &a pc BJ Га", b") $& 
Jun KERER $8 m) Е E interval of uncertai- 
niy), ЖАШ L, Ж 

АНИ, ШЖ f(*) 的 形式 可 以 是 未 知 的 。 因 此 
а EK ERO Ea, b)-— A-A 计算 f(x) 
dt, JST KS Hi ШЖ, SUD pU SCR AR 
е X L21338 EE HER PAS OI i t ЕКЕНИ 
验 次 数 。 具 体 说 ， 就 是 艾叶 技能 最 有 效 地 利用 这 些 试验 的 拥 . 
索 方法 。 = | 

我 们 应 注意， 这 些 试验 仅 由 函数 求 信 组 成 ， 特 别 是 不 需 
要 计算 函数 (x) 的 导数 。 НЯ, 这 些 算法 仅 限 于 请 数 在 
Тае, Беу яння В, 


–. жеңи 


假设 Сх) ЕЕ l EAER, 如 果 对 T tE tita 
x€[a^, b5], f(x)BE x #š BUT. x* BE MQ JS, М ЖУСУ 
. [207 


Cat, ье (unimodal), 简单 地 说 ， 只 一 个 局 
ЛИН, ЖШ НИЕ И[а°, b] 
上 单 峰 函数 的 两 个 合子。 注意 我 们 没有 要 求 ii 5 КОНЕ 
НИНЕ, uni 1. 


(b) 
Ё 5-1 


3]: 5-1 设 f(x)E(a*, 0°] Бе йу, TE ELE 
x*e[a*, b? Jm MB, ЖАТ Габ, БС x* 
欧 子 区 间 ， 需 要 在 区 间 [ a"， я AVRAT E, 

证 明 Hx a och? НИ /(х,)(®. 

-2), WARF x*'€[a*, x,], m 3 xt ep, b°]. " 
ВА х,>х, ‚НИ Ж fx. 如 果 Их), nU 
x*€[a*, xi], gH xte[xy, bol. 
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二 、 对 分 搜索 


对 分 接 索 (dichotomous search) A iE XE Ha & x" № 
TRE CK: HE A RU UON E, 设 c" 是 区 18а", 5") 
Нк, № o* 二 (4 十 6")/2， 这 时 选 一 个 小 正 60, РН 
4 тс" — (2/2), x$g2c"40 (2/2), 如果 f(x), 
则 按 引 理 5-1, № Ho" *! —a" R b"*! — x$—c" + (e/2), 
如 图 5-3 中 所 zs; A Ща" 1 ро" — (2/2) bnt! ==, 
ЕЮ, e 可 以 选 作 使 天 x*) 和 fce) ях 8 BS Л 
正 数 。 显 然 ,在 每 次 迭代 中 ,不 确定 区 间 的 长 度 按 接近 于 0.5 
的 因子 而 缩短 。 对 这 一 缩 租 的 更 详细 的 分 析 在 例题 5-1 中 给 

例 5-1 ЛТ HOS iik f(x) ax ' —2x!— 1x 3 

ФЕ КСА, де Го, ІЕЕ ЛМЕ ВИТЕ В. 

[8] 用 解 诉 法 可 以 验证 ， 在 区 А-1, 11E f(x) 在 
点 % 一 一 0.464 有 最 大 值 5， 在 点 x 二 0,63 取 最 小 值 一 0.2。 
了 (x) 的 图 形 见 图 5-4. 

ER 60.135 a0* —0,5* &1,35 A с? 0.5, x1$—0.45 
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a capti! 

x" 
Xx! c" xt pt 

b^ 


| B 5-3 


х= "TP ; 

та °з. НЯ SGH, /[(0.45)=0,52 № f (0.553 
‚се. 。 п» FD (089), PEET | 

=b" =1, EOM сї ==0.725, xY | M 
| | 4120, Хү==б,675, Xi0.775, Ei 
ЕЯ Я (0.615) 70.11 # (0,178) о 07 | М 
f(xi)jf(x]), Hi a?—a!'—0,45 О к! А 5 | "= 
А г | | ^ = UC ` 5. 


Uf ix) твара x3 


ENT TEE 


在 对 分 搜索 法 中 ， 我 们 选 x? 和 好 对 称 于 区 la", 5^] 
的 中 间 点 。 但 是 ， 这 不 是 叭 一 可 能 的 选择 方法， 事实 上 。 
хатаре, я, vs. аты 


+ 


TT. 


жикке GAA Fi pte nae 
НИ д ЕЖЕ, МНЕНИИ, T 
Б ЖЕНА ЛЕА ЖЕНЯ ОТА Е, 
下 一 次 选 代 中 也 还 可 以 使 用 ， 这 就 可 以 简化 计算 。 在 对 分 法 
里 ， 因 为 在 第 (n 十 1) 次 选 代 中 不 使 用 ODA fx) nai, 
就 没有 上 述 优 点 ， 

作为 最 简单 的 等 间隔 搜索 方案 ， 我 们 选 两 个 点 хх, 
把 [a*，5"3 分 割 成 三 个 等 长 的 子 区 闻 ， 此 方法 Md ЖИ 
НИ (горо eaucl- interval), H 5-5 ЖО Y 3X — 
ne. Е TH x1 osa" + (b? —2*)/3, дав" (b* anys. 
根据 5| 理 5-! brte, аза", HE S, ate 
(a^, bat], AGER KE АН feri Sun, 
这 时 ， nt A C ia 3, L 

OST ERHOBEN АЛИН, язсан 
ЖЕЛ ЗЕ, 5—6 所 示 。 在 图 5-6 中 ,我 们 选 点 x1, X5 1х8, 
把 [a"，8"] 分 成 四 个 等 长 的 子 区 赔 ， 并 且 计算 1(x?), /(х) 
7 (х8). ЗИТ, Cp T3 E 
* pps Sua ЛЕ 5-6 1, f(xtym mint f(x") , Ея, 
Нар Н, a" erg, Бел, HE, ЖЕ", 


. `L 3, 


n), ИН ER[ottt, bh gp ЙЕ Ж eed 
КАК веет BW Ноа н, ШЕЕ 
用 次 数 增加 了 。 这 一 算法 将 在 问题 5-3 中 作 更 详细 的 讨论 。 


мо! 


моб ` CAT 
22v TP GO, 
ES - o, 


TURRE, b* 1ДЕ ЖЕ ФИ КЕК А, ВЯ 
ТРЕВА, АФН, ЯВ ЯН S 3 WE Pa 
FEES: 
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P 5-2 对 例 5-1 HEREC, 1] EE HEB EC f(x) 
用 三 点 等 间隔 搜索 方案 作 计 算 , MO Ph EE Eran 
*. | 

[S] Eira'zo, 69=1, И 51=0.25,58=0.5 
W 4} =0.15, E Hit Я 48 31 /(0.25)=1.24 , f (0.5) = 
(0,15) 0, FERME SE a 20,5,b! 1923101 0.25, 
$1=0,75, ХЕХ БЫ х* АР] b'—a'-0.50, Ш 
ЕЯ 5-1 中 是 六 一 8 二 1 一 0.46 一 0.55。 注 意 到 f(x) E Sk 
峰 的 ， 并 号 f(0.5) f(0.75) f(0.28), {ТӨТ DA 进一步 
Луй x* 的 区 间 的 长 度 , S ЗЕ 0:=0.5, 5!20,.75, IE 
有 时， b!—a'—0.25, MEE 0.5, лат АКИЙ 
须 计算 三 次 f(x) 值 . * 

015-5 用 三 点 等 间隔 搜索 法 对 函数 f(x) met — 5x fE 
BARS, ex B. 2I х*, 


E 
"Pan, WERL MS. АЕ at Ins 809 
达到 最 小 值 。 . 

EA 0%=1, b?-—2,. j&xl)=1.25,. x9=1,5 和 
xP—1.75, 直接 计 算 求 出 f/(1.25)=-—2.75, f(1.5) 9 — 3,0 
$5/f(1.18)59 —2.96, E 5k f (1.5) min[ f(1.25 ), (1.5), 
1.15) ВАЗА a! —1.25,51 1,75, 2051—01 у/4 
—0.125, Bi xl-1.375, sxle1.5 l хі 1.625, £d] 
已 经 计算 过 f(x) 二 (1.5) 二 一 3.0， 至 于 其 他 的 E EE, 
直接 计算 得 到 (1.375) —2.95, f(1.625)-—3.053, H 
在 3.625) = min (1.375), (1.5)，f(1.628)]。 因 此 我 
f1Hxa*—1.5, füb?-1.75, Ede, ФТ ШЕ, = 
Иа", БН 1,625 作为 x* Our i. 
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. Fibonacci 搜索 


НЕМ ЛЕ, ПОТА, TIAE 
AAR RARA AREAK. RESA 5—1, ХЕ 
HRA fi ДУЛУ SU С CRT ET ec E ifa e Ж. ERU fer EP] ЖОЛУК 
$. ЕЕ ЕН, Jer ЕЛ АСТЕ ЗЕ. 
Nip) 而 三 点 等 疗 阳 法 中 有 有 一 个 前 已 计算 的 函 

提亲 新 算 的 两 个 熏 一 起 使 用 。 现 在 我 们 要 寻求 -种 方法 ， 
и КЖ, ВЕКЕ, ННЯ 
РН, АН: н 8 — #h wj f& Fibonacci iE 
Ж. 

假设 我 们 希望 安排 nn 次 试验 ， 最 小 分 离 度 是 z， 那 么 设 
L, sinis cH FANE, 并 且 使 用 对 分 搜索 在 
REL. ; 上 ， 在 与 第 (n 一 1) 次 试验 对 称 并 且 距 离 为 的 总 
上 安排 第 3 次 试验 ， 如 图 s-t ВР. ТЕК К. ЖЕ (х)#л 
HASE., MAC ERRER, РЕГИ АОВ 
з, dE GamaE--TAR E, и p uQ ЖЕ, 从 图 
5-7 Ей, L. Ñ L,-, Z IRI RR FB F ER tH 

L, Q—2L,—2 (5.1) 

ижат ен, Жел, Л 
nas, 图 5-7 中 的 x 号 必须 是 罕 区 间 La- 上 两 

idt ДЕУ Л. ЖЕ 5-8 中 表示 出 了 这 种 情况 ， 由 此 家 
护 得 到 关系 式 | 


Ба-з== Ба-а +L, 
AE l B РАЖ E 
L,-s=L,- a Ln- 
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或 者 ， 一 般 地 
La- Lamr- оси, R=2, 8, |an (5.2) 
利用 (5.1) 和 (5.2) 式 ， 我 们 看 到 


中 点 
w 1 вымя 
i ， = 点 
Я ү | 新 试验 点 
А | 
i Fd м 
25. | | 
| 
mc La- — 
图 5-1 


Е 5-8 


La-.0LQ-,45,983L.—8 ' 

L,-s= La-a bai 5L 2e 

Li. La-a La I =8L,—3e (5.3y 
Las Ls FL, ,- 518L,— 58 


01377 


Ly, =F, Le Fe. 
让 这 一 序列 中 ， 系 数 F. 具有 如 下 性 质 
F =P, - +E, ,, R=2, 3, = (5.4) 
#rBF =F =, ЖУР, 被 冠 以 意大利 科学 家 Fitonacei 
dH iE, ЖЗ Fibonacci EA, 

Я 5-4 1202 年 意大利 № ÉE BU E 86 3C leonard (B 
Fibonacci), ТЕЕ ЖЕРНИ В, BRET 一 £ 
ВЯ. НЕТ ЯНАО, ДЕ 
个 月 产 一 对 小 第 。 设 了, 3226828 n ТА Е в, ЭБШ 
开始 时 是 一 对 野 免 ， 我 们 看 到 下, 二, =1。 两 个 月 后 ， 第 一 
ЕТ ЛЖ, ЗК 20 М, РР, =2, ЩИ 
38, Fa=3, Р.=5, F,—-8, F,—13, M R F,—F, + 
看 ,-，， 这 就 是 方程 (5.4) 的 Fibonacci Я, 

[№] 在 (5.3) 中 令 =n 一 1， 得 到 


aiti t, (5.5) 


它 给 出 了 初始 区 间 L У n 次 试验 后 的 kK L, > 3 
哟 关系 。 因 为 头 两 次 试验 区 间 不 缩小 ， 所 以 二 ,一 工 :， 
ЖЖ, XP R—n—2, dx(5.2)88 Ui 
s— Fs-iLs— Fae 
或 将 (5.5) 式 代入 ， 得 出 


L, =P ka Ursa, Pa F.) 


НА. АЛЕ, Ж Я Fibonacci Je 列 的 性 
Ж 
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F2 Q,—F, GF, Q2(—1)* 


得 到 
| L = P i 07е. (5.6) 
现在 把 Fibonacci 算法 概括 如 下 ， 
1. 广 定 初始 的 不 确定 区 各 
L, =b 0° 
2 .利用 最 小 分 离 度 。 和 规定 的 试验 点 数 #， 由 式 (5.6》 
3H La. 


3. 从 一 端点 [如 а, да L, 个 单位 , 定 出 第 一 
一 个 试验 点 4， 

4. 从 另 一 总 (如 59) 取 工 ; 个 单位 ， 确定 出 第 二 个 试验 
mb, 

SR f (a! ЖАНА, fu f (at) f (T) [н] 
(61, Ье), RAE fia!) Ко) 1609, at), 

5. 在 余下 区 间 上 ， 对称 地 取 下 一 次 试 痊 点 ， 并 继续 执行 
#52. 

т, п 次 试 改 ， 最 后 一 个 试验 点 将 恰好 距 已 有 的 那个 
试 从 点 个 单位 。 理 论 上 的 最 后 不 确定 区 则 出 式 (5.5) 给 - 
出 


例 5-5 对 图 5-o(a) йа 使 用 Fibonacci 法 ， 取 
п=4, 8—0, 
[WJ В L,—1, Р,=3, FP =5 34 L,—0.8, Ш. 
5-9{2) 所 示 、 虞 后 的 二 确定 区 间 由 式 (5.5) 给 出 。 即 


„==. 


4 


S I ЕЕ Е, Fibonacci 法 有 下 列 优 : 
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LIFRE ESO, БАБИНЕ Cb 就 是 
-说 ， 每 次 试验 所 得 的 区 间 ， 缩 减 量 最 大 )。 

2 .不 需要 计算 函数 的 梯度 ， 

3. 算 法 简单 ， 旦 宜 于 在 计算 机 上 实现 。 

4. 每 次 选 代 只 需要 贮存 四 个 取样 点 ， 

5, 基 后 的 不 确定 区 间 容 易 预先 计算 出 来 。 

尽管 有 这 些 优点 ， 沪 方法 也 有 如 下 缺点 ， 

1. SUE ЕЕ K RB E n, 


I 


(b) RE ERI 
` . № 5-3 
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2.ФАЖ НЕ НАЛУУ ИШЕ s, 
下 一 节 将 会 看 到 ， 2 HEIRE, MAAR 
-点 都 可 以 克服 。 


=. #2288 


fU kI k SE TORIS IC ЖЕ RTT RA PTT gi [< T8] 

РАИСИ ВЕК ECRBUEGL GRO * £5 €x 
:法 。 如 果 令 表示 每 次 迭代 末尾 和 开始 区 间 的 长 度 之 比 ， 那 
о нА, р 

в. тп BF n= yt 

а ror ^ 
这 相应 于 在 开始 区 间 [a*， b"] b, WIRJA xi 和 x2, 
ЗБ № xia" 和 加 一 2 是 相等 的 ， 都 等 于 АСБ" а"), ИН 
5—10 所 示 。 从 (5.7?) 式 可 知 ， 由 简单 的 代数 演算 ， 可 以 得 到 


MIS VI (5.8) 
AB 5-10 8:8, а)ба), PDA А {1 p btt ut, 
art =a", Ж ЕҢ хат, Ж, COT E (К 
法 代 满 是 (5.7) 式 ， 必 须 有 


C "41 bn+1 5*1 _ 
= 2 U “тажай (5.9) 
b**rlgtt i фичи, qnt 


上 式 通过 代 换 ， 化 简 为 


xX1— u" 
= - 5.10 
^ x5—aG" ( ) 


3605.8). GORA Е, На 各 十 入 一 1 二 0 来 
ЖА, ЖЕН АЕ (И 5 一 1)/2 一 0.618, 我 们 可 以 造 
на" + 1 
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fix) 
ACh" а") 


一 g^'zges*! x9zx st! x= hrn РЫ х 
图 5-10 


де НЫ, du хх), MRD =b art 一 x?， 
并 且 选 хп =x, ЯЖ ИНТ, ДИН ЩА 
0.618. Dixit Bp iE Я ЖЗ = bnt' — (1-4) 
(b""—a* 98, RER, ВО xl НЕ xB Е ED 其 对 应 的 
ш гє БЕ ШЕ nti АКИН, 

$55 应 用 黄金 分 割 法 , Хе" 55 E PC Bl 
[i 2J 上 的 极 小 什 点 位 置 ， 并 且 与 例题 5-3 的 结果 相 比 较 ， 

TE] 例 5-3 使 沾 了 三 点 等 间隔 搜索 方案 ， 在 计算 五 次 
ESGAR, $WIISEPAL-O.5. ШЕ ЖИ E REDE 
XC ELÉLOLIS RE EUIS A 工 . 因 为 已 知 a? —1$0 59 —2, 
ERRENA A х1==1.382 $80 x2—1.618, Bi 
ж жер, f(1.282)—-—2.9434n f(1.618) —3.1, Ey 
fof. RIA 221.382 81 b! — 512, 

在 第 二 次 选 代 中 ， 取 寻 =11=1.618, Б E. i Ж 
xijz2—í(1—0.818)(2—1.382)-1.765, 由 直接 计算 得 到 
了 (1.765) 一 一 3.0。 AX JODS Ri R at =а! = 
1.382 #1 b* o x1—1.765, 
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PEKAR RMR х1=х3=1.618, Bit Et 1,382 
4-0.382(1.765—1.382)-1.527, ЊЕ # ® f(1.527)= 
一 2.0 RAI, SFR ЗИ, РАЯ R в = = 
1.572, b! —b?—1,.765 

第 四 次 选 代 ， Huxi-xi-1.618, ib 12=1.165— 
0.382(1.765-—1.527) 21.674, ЖЕ, Eig Ei Af 1.674) 
一 一 0.306 可 知 ， 显 然 f(x) (xD), MUAR {1 # a! =a 
—1.827 与 bt=x1=1.674. 现在 我 们 已 作 了 五 次 函数 计算 ， 


并 计算 出 A 一 《二 一 0,147. 同 例 5-3 中 得 到 的 0.25 


ЖЕ, АЙЕЛ е а. 

例 5-7 黄金 分 割 法 是 将 单位 区 同 分 成 两 个 不 相 等 葛 部 
分 ， 使 得 总 长 与 大 的 那 部 分 的 长 度 之 比 ， 等 于 大 的 部 分 与 小 
灼 部 分 之 比 。 若 外 表示 大 的 部 分 ， 则 有 


LA 
А 1—À 


由 上 式 得 42 十 4 一 1 一 0 
这 一 分 割 线段 的 方式 是 几何 学 家 Euclid 提出 Н], ЖЗ 
黄金 分 天 .在 古 项 蓝 药 建筑 中 ,广泛 采用 了 这 种 比例 关系 ， 
例 5-8 用工 , 表示 经 过 安排 # 次 试验 以 后 的 不 确定 
км, С 代表 初始 区 间 ， 对 黄金 分 割 法 ， ADEA Р, 
КЖЕ ЙЕ п 次 试验 后 榴 不 确定 区 间 与 初始 区 间 之 比 ， 我 们 有 


n | D 2 3 а 


Іп Li aLa ALi АЗ. 1 
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Е 


L - 
D = Z 3-1 
= T. ^ (5.11) 
B 5-9 Xin-i:i, 比较 Fibonacci TUE E SG 
KARRAR. f 
对 于 Fibonacci k, 1 гаш), 从 (5.5) 式 得 到 
L o 1 
006944 


对 于 黄金 分 割 搜索 ， 巾 (5,11) 式 得 到 


Luz ? (0.618)! * —0,008130 
1 


а, 次 试验 以 后 ，Fibonacci 法 比 黄 金 分 制 搜索 
得 到 更 小 的 不 确定 区 间 ， 大 约 小 12 加 ， 


六 、 二 次 揪 值 法 


到 目前 为 止 ， 所 讨论 的 搜索 方案 容易 在 计算 机 上 编 成 程 
ж, 

在 问题 5-1 和 5-2 rh, АНТ 63 [E] RISE ҖЫЕН 
итин, СИНЯЯ. ЗЕЯ 
LAARA RIAT ZT € 次 选 代 后 , 末 区 疗 长 度 与 初始 
区 间 长 度 之 比 是 Xa-I， 其 中 近似 有 %= 一 0.618。 这 些 方法 的 
主要 的 缺点 是 ， 为 以 合理 的 精度 求 得 x* 的 位 置 ， 需 要 计算 
大量 的 函数 侍 ， 

另 一 种 求 ** 的 方法 是 用 有 限 次 多 项 式 作 f(x) 的 近似 
诡 数 ， 这 时 可 以 解析 地 确定 多 项 式 的 极 小 点 位 置 ， 同 时 把 这 
个 值 作为 x* 的 估计 信 。 虽 然 三 次 多 项 式 的 应 用 也 很 成 功 ， 
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诅 二 次 多 项 式 息 最 简单 的 近 亿 函数 .在 讨论 二 次 插值 法 以 
前 ,值得 指出 的 是 这 个 方法 常用 三 更 复杂 的 求 设 小 问题 上 ， 
Я, Ux £ n ET) SL, (хуп ЗЕ EM E Se. BB2 E 
лаве TRIES X36, вым 
К ДИ j (minimizing downs the line), 


Ux? Е, v mak ARTIN., BARE 
Жох = Аду, ҖЕП А, 使 fx? 十 YY) 闫 于 入 取 设 小 。 当 
然 ， 这 后 一 个 求 极 小 的 问题 等 价 于 标量 ва C gC(4) 二 f(x? 十 
JAYXCE AGRO. Вуж хе 点 是 下 山 (down 加 I 四方 向 ， 
我 们 有 有 0。 引入 上 村 坟 以 六 银 过 大 的 步 长 ,于 是 该 一 维 
搜索 等 价 王 对 OsAm. Ж (ИЕ, REDE EER, 
章 将 作 进 一 步 的 讨论 . 


现在 我 们 说 明 如 何 和 用 二 次 插 沁 米 简化 这 种 一 维 搜 索 问 
ИШ ЖШ, Жр Шү ЕЕ ж, ШЕ 8 001), ШЖ 
.8(1)7»9(0), Ч 41/2, 1/4, 1/8, НЯ 9%), 直到 
«а, ЖЕНЕ a=0, b=, 4010-241, IE НЕ 
下 式 计算 入 

^. 1 g(a)(c— b?) -g(5) (a? ez 十 BC 本 一 可) 

^ 3 g(a)(ce—b)+3(b)(a c) gCc)(b—a) 

| (5.12) 

这 一 表达 式 在 习题 5-2 中 时 出 。 Ш 0(1)<9(0), Ж 
АНТ А=2, 4, 8, =, а, b, СЫ gO), Ere dm 
WE g(o)>g(b) 的 第 一 个 点 。 然 后 再 一 次 用 式 (5.12) 计 算 
А, зо l<), НЕМ A, КИЕВ, H art 
(x? 十 4Y) 闫 于 4 的 极 小 ， 如果 0( 5 );>0(®), ЛЕ S b fE 
ЖА, КИН. ggf g(1)< g(0)p Е Я 的 二 次 
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揪 值 过 程 秀 别 图 示 在 图 51 5-12 中 。 


E] 5-12 


LEN 11 xi ж 95(4)—84*—24?— 144-3, (5.12) 
ША, 并 与 例题 5-1 的 结果 作 一 比较 。 

[М] 注意 到 g(0)=3 和 g(1)=2， 也 就 是 8g(1) 之 
g(0)， 然 后 对 4 一 2 计算 (3), 得 到 gl2) 二 45， 因 为 9(2》 
—g(1), Ио 5 一 1 和 c=2， ЖЕН (5.17) Ая 

Z=} 3(4—1)-2(0— 4) T-45(1—0). -一 0.52 

3(2—1)4-2(0—2) -45(1—0) 
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ADI 5-1 mi. ТЕ[0, 1] E g(A) 8 — FE R, A*—0.63. 
WA =o. 59 是 和 * 的 一 个 示 好 的 佑 人 入， 尽管 它 只 需 ЭИК 
数值 三 次 , 大 多 数 其 它 的 区 间 搜 索 法 求 函 数值 四 次 ， 将 产生 
一 个 更 好 的 A* E, 但 是 对 于 一 个 每 次 选 代 都 使 用 一 维 搜 . 
车 法 的 优化 算法 ， 在 初始 阶段 可 能 并 不 需要 这 样 好 的 精度 
例 5-11 在 区 交 [1，2] 用 二 次 插值 法 技 出 f(x) =е° — 
5x 的 极 小 。 | 
[8] 使 用 新 的 变数 4 一 x 一 1， 我 们 得 到 ое 
一 544 十 1)， 直 接 计 算 9(0)= 一 2.282 М g(1) - —2.611. 
HZ 9(1)<9(0), RP iX 9(2)=5.086, ЁЛ dE g(2)> 
(D, RÄRTEG. 12) 4 a—0, b=1 Ж c=2 得 到 


=! —2.282(4—1)+(—2.611)(—4)+5.086 
2 —3. 282021) + —2.811)(— 2) +5. 086 
= 0, 


531 


T 


A* 的 精确 解 由 A*=x*—1=0.609 给 出 


t. 990 5 K 


到 目前 为 止 ， 所 讨论 的 区 间 搜 索 法 本 质 上 都 是 序 贰 的。 
RERE GE nl 次 迭代 中 ， 试 验 点 的 位 置 不 能 预 先 规 
定 ， 而 要 取决 于 第 n 次 选 代 得 到 的 不 确定 区 间 ， 可 是 ， 在 某 
华 其 他 的 区 间 搜 索 方法 中 ,所 有 试验 点 的 位 置 可 以 Ro 
ж. Уо УЖ. 在 穷 举 法 中 ， 我 们 把 原始 
的 不 确定 区 局 [ae，550] 分 成 数目 很 大 的 一 组 相同 长 度 的 子 区 
TE. ME 5-13 所 示 。 然 后 计算 FOE ЕНИН E MJ 
值 ， 并 在 函 教 值 的 这 个 有 限 集 合 中 求 出 最 小 值 。 这 一 最 小 值 
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MARIE 为 х* 的 估计 值 。 例 如 ， 在 图 5-13 中 ， 这 个 过 f = 
3k x, 作为 za 的 估计 值 。 从 这 个 例子 显然 可 见 ， 子 区 间 前 
长 庆 必 须 取 得 是 够 小 ， 才 不 致 漏 掉 每 个 尖 前 和 ER 的 极 小 
值 。 另 一 方面 ,小 子 区 闻 造 成 函数 值 计算 的 总 次 数 增加 ， 氏 
而 算法 的 效率 十 分 低 ， 穷 举 搜索 法 对 于 在 极 息 点 附近 平坦 且 
相对 光滑 的 函数 是 相当 有 效 的 。 


EU 


5-1 HD. ATER n KARIE, аи 
与 包含 点 x* 的 初始 区 间 长 度 之 比 ， 则 可 以 作为 获得 对 分 搜 
索 法 效率 的 一 种 量度 。 试 给 出 D, RE SS. 

[R] 不 失 一 般 性 ， 我 们 假定 初始 不 确定 区 间 的 长度 次 
ХЕРНЯ ТИ Ш у= (ха) (а) 
PERI, НЕ. =5 RRR d CRUS DRUG 
МЕ, MARTHIE, ое 
5-3). HE L,—i, НӘ 上 ,利用 上述 方程 ， 得 到 
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一 T md UE 

_ 1 £ 1 1 

— st zt + r) 

= 1 21. 

= >" +E (1 x) 

ЖЧ тАЖ РИН, 8 

D =L. =. Е | 
六 一 了 一 +efi 35 (5 13) 


и КАКОЕ HE AREAK, YE I IE BO Ë 
ЖИ N Noam Hi, ЕВ по, Loc, 换血 话 
A. ЖЕР ЧӘНЕЯ. B x" 的 最 后 不 确定 区 间 的 长 度 至 少 
Ж г, 

5-2 将 习题 5-! 中 的 方程 (5.13) 同 例题 5-1 的 结果 作 
比较 。 

[R] 在 例题 5-1 中 , 数值 结果 给 出 工 一 5 一 0 一 
0.118—0,4520,325, 利用 方程 (5.13}， 也 可 得 出 b= 


1 1 
— О. . 
hu (з t jeo 325, 


在 习题 5-1 中 我 们 看 到 用 对 分 搜索 算法 最 后 不 确定 区 加 
至 少 是 z。 从 例题 5-1 可 以 看 型 ， 当 2 一 0.1 时 ,了 一 0.325。 
但 是 ,如果 在 经 过 二 次 选 代 后 ， 用 fo? ， 52108 中 点 с, Ж 
最 优点 ， 我 们 看 到 cy 一 0.61235。 因 此 在 只 经 过 二 次 夺 代 后 
的 误差 是 x* 一 co 二 0.63 一 0.6125 二 0.0175, 已 经 比 z 小 得 
多 。 这 个 例题 指出 ， 工 。 代表 经 过 站 次 法 代 后 不 确定 区 间 的 
最 坏 的 情况 ， 而 实际 误差 可 能 比 这 小 得 多 ， 这 个 例子 也 措 出 
了 精心 选取 上 的 重要 竹 ， 岗 为 在 这 种 情况 证 ， 它 限制 了 可 得 
到 的 也 论 上 的 精度 。 
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5-5 SEM USE THIS PCR IIR DAGRINS, ЕН о 
10 内 求 f(x)-9x*—4x- НАЕ, 

[W] 在 区 间 [0，10] 上 的 三 个 等 距离 的 点 ， 求 fOx)BJ 
4&1 302.5) = —6.75, f(5.0)——3.00, f(7.5)—13.25, 
哥 留 区 间 [0，5J， 并 在 区 间 [0，5] 的 三 个 等 距离 点 求 函数 
值 ,得 到 

f(1.25)2—3.94, f(2.5)—6.75, {(3.15)=-6.44 
SREIIB[2.5. 5], ЖЖ И2.5, 51Ң0=-[ Ый RC 
值 ， 得 到 

#(3.125)=-6.98, (3.75) = —8.44, f(4.335)— — 

5.11 
TESDXB[2.5, 3.15], TRAH 9 次 试验 组 成 前 = GR 
我 后 ， 不 确定 区 间 缩 小 到 它 的 初始 值 的 12.5 介 ， 

8-4 对 于 三 点 等 间隔 搜 索 算法 , 试 找 出 为 了 其 得 规定 
НЕНИЯ АНЯ, 计算 总 
КАЕ. 

UM] ix L.—b"—a*, ША 5-6 EAL МТ 三 点 等 
{Н BS E xk. L.a—L./2. IN JE, IRL =1, L,/LI = 


(+) mih rS L./L S A 工 必须 有 


ВЕ? 或 Il, 


AL 
BE 
nln2zn(1/A L)=—In A L 
且 
пы МА т AL 


在 第 一 次 选 代 中 ， 我 们 计算 函数 皇 三 次 。 侧 在 随后 的 所 
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НК, ЕК аи. AEE n GERI rh 
y ЖЕЕ ИОВ Ж +n. CP 是 ， 我 们 有 
Nz:1—2.8821n A L (5.14) 
5-5 将 (5.14) 式 与 例 十 5-4 中 得 到 的 结果 进行 比较 。 
[R] 从 例题 5-4 VIA. A Lo (а> —5*)/(a* —b*) = 
0.25。 因 此 由 (5.147 得 到 
Nz21—2.8821n0,25—5 ОН) 
ЖН ЖЕЕ Н ЖКТЕ РШЕ A 了 一 0.25。 这 个 结果 与 
我 们 在 例题 5-4 中 得 到 的 一 致 ， 
5-6 Е L.JL «10, HFibonacci 83 Л 
РН ик, 
[W] М(5.5) АЖ 220, Я 


H 
因为 了 is 一 6765 和 了 一 10946， 我 们 看 到 需要 计算 ЗИ 
20 次 。 

5-7 推导 二 次 插 售 法 中 的 方程 (5.12)。 

LE] 首先 假设 g(%) 的 近似 为 二 次 型 q (A) = u bui 
But. AFDE. 97-0 ВА = (а/а), 


dim a = 3 39, шр тл) Л ИЙЫМ, HERT 


Е СА) оС) E GR NL Ж EC us. пу, ta, ЖА 
Bg. Ша, b Rice 表示， 并 令 ОСА) T (A), d 


g(a) =н, - u,a-F ua (5.152) 
о) 2t, ti; b ru 5* (5.155) 
g(c) -ug-F и. сис? (5.150) 


МИЯ Cramer i: Ri ВН в, ЯП as, 


" 15! + 


и а c 
| 


УЕ b b*-(a—b)(b—c)(c—a) 
Hc c? | 
| gla) в? 

um g(b) b? 
3 gle) c? 


— g(a)(b*—c*) E gb) (e! —a*) 9(е) (a? —5?) 
(a—5b)(b—c)(c—a) 


= g(a)(c—5) E g(b)(a— c) (са) 


(a—b)(b—c)(c—a) 


n d," 
2 2 8, 


= 1 9) ("В g(b)(at—c2y+g(e)(b?2—a°) 
2 gía)c—b)-Fg(6)(a—c)-Fo(c)(5 —a) 
5-8 РЯ (5.4) mi F, SCR— НЕА. 
[KM] 作为 一 个 试探 解 ， 假 设 
F,- Api Bpi (5.17) 


ARA В, трем G NL E. (5.17) КА. 
(5.4), 8 


Apt Bpi—A(pt + pi *) FBCpt b ot?) 
Аре pt — pt t) + Вр pf! —9f7?)—0 


НИЕМ k, pı 和 pa 必须 满足 


p'—p—i-0 


gi Jt = 
1+ 0.61 
pomi o 618. p, = 50 .618 


ЖАУА F =P =l, НАНА, РЯ o4d4B-I. 
Ар. +Вр.=1, Bu 


А= 1721, Ba APTI 


р: р» Pi” P2 
最 后 
=í 1-р pi—l 
p, - ( 3—? pt (C71) 
Pi— Ps n Di P: pi 
但 
1I—p miim 5 lt iep, 
2 
1+5 —1+.5 
一 | = — = — 
р! 2 1 2 n 
所 以 
F.-—| —( krl i) 
Ë р.р; pi HE: 
或 者 


5-4 证 明黄 金 分 割 法 和 Fibonacci E fr fag gcc 
SERE. 
[8E] 我 们 定义 源 近 X SXXE E >; 


lim Ё, 


fus 
Lua 


TE Кала Не 5-8) 


. 153 ~ 


E n 


=== 0.618 


9-1 


ЭЧЕ п EG, HUP Fibonacci 法 取 8 二 0 有 


№ 
. L . F.. . 4р4 Boni ? 
lim а 24 Hm EIL Е 
uc Lani aza Fy nm — Apid Bp: 
(5.18) 


其 中 p,=1.618, p=— 0.6818, 
[839 |р, 1, 2j &(5.18) SCR 


lim Р 


_ 1 
m=» pi p, 1,618 


RARE ИНО КЕЛЕГ, 

5-10 {E JH Fibonacci iE. Ж/(ху=х*%—6хХ-Е2 在 区 
06510 БИА, DB ED ILES mum 
3%. 

[9] Уе 


Len 1 


一 0.618 


лока, [BJ /Fed 0.03, НХ #220 有 
Li Раа 0100) =6 18 
f[(8.18)—3.112 
f(10—6.18)— (3.82) 6.328 
AJ f(3.82)«f(6.18), MAK jg[o.18, 10], Jt z$ 
Жш К 6.18— 3.82=92,36 46, Ш, ЛЯ 
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#{(2.36)=—6.518< f(3.82), ПЕ DX (3.82, 6.18], 
并 对 称 地 在 3,82 一 2.34 一 1.46 ЖЕТ Жи. FA TU 因为 
f(1.46)— —4.65907-/(2.36), # ЗЕ X МО, 1.47], Ж 
3.82—2.36--1.47=2.93 AHE та, h F f(2.93)— 
—6.996< f(1.47), ВТ 991.47, 2.36], Æ 3.82—2.9X 
c 2.36—3.286 点 作 下 一 次 试 驻 ， 因 为 КЗ.25) = — 6.0947 
f(2.94), ЖЗ[З.25, 3.92 t 1E 3,25—2.9442.36=2.67 
METRE, ХО о (2.67) = —6.872>7(2.94), Ш 
32.36, 2.67 ] ЗЕ 3.25-—2.944-2.67==2.98 点 TE REIA 
№, жа f(2.98)— —6.9-cf(2.87), ВРЛА EE 
[2.98，3.257] 小 于 初始 区 间 药 3%, ， 最 小 点 实 际 上 出 现在 
2 一 30 处 ， 正 如 所 期 望 的 那 祥 ， 它 包 售 在 最 后 的 区 НН. 


补充 题 


$-11 ўсх) Габ, b*1E S ЛИКЕ, д 
LEA c 

5-12 iE Bj Fibonacci|E Zl, d F2., —F, F... == 
(—-1». 

5-13 导出 (5.8)} 和 (5.10) 式 。 

5-14 对 例题 5-10 给 出 gCA) a E08 LUCR f ЕР, 

5-15 对 例题 5-11 213 СА) у КЕ ВЕК, 

5—10 对 问题 5—10, 88 ТЕЕ 5-9 (5) HIE EE E Fibonacci 

5-17 В Hi Fibonacci J8 ti n—8,3 f(x) —e* —5x 
ELL 2 М E p ER D. А Ы 5—3, 5-6 和 5-11 8, 
НИ: . 
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5-18 A THE ALSO.125 的 要 求 ， 求 使 用 
SEX E Ul = 

(2)Fibonacci f£ xt 

Р}, НИЖЕ Ки. 


5-9 АЕА ir И f(x) —x'—2x*-i f DRE 
10，2] 上 的 极 小 位 置 。 
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HUNE 无 约束 梯度 法 


第 二 到 第 四 章 讨论 了 解 最 优化 问题 的 间接 方法 ， 之 所 以 
` 称 为 间接 法 ,是 因为 这 些 方 法 只 给 由 本 最 做 解 的 必要 条 任 , 为 
了 得 到 问题 的 数值 解 。 还 必须 求解 作为 必要 条 件 的 方 各 和 下 
等 式 组 。 

ЖЕЕ ЛИНЬ. 2 Pr 
ОЖ ЯНВ КИН, 
直接 对 目标 函数 进行 运算 以 求 得 管 案 。 在 这 些 方法 中 ， 没 有 
-正式 的 中 间 步 琶 去 确定 最 优 解 的 必 届 条件 ， 尽 管 演 些 算法 本 
六 可 以 用 这 些 条 件 推 导出 来 。 

从 三 章 开 始 ， 我 们 讨论 解 多 维 问题 的 直接 方法 。 HH 
- 论 最 简单 的 一 种 ， 即 梯 麻 算法。 这 一 算法 是 解约 束 问题 和 元 
约束 问题 的 许多 直接 方法 的 基础 。 尽 管 这 些 方法 的 收 敏 性 并 
Жэ, BAFRA, MARA Z. AE he 
度 算法 及 其 在 解 无 约束 问题 中 的 应 用 ， 


一 、 梯 度 方向 
А ЖЕФ, EXT пСО) ВОВЕ E niis 
Уро) | д ху, Ро, «3509 |" 


ХШ ЕТЕЙ ДЕТ yl ВЕРЬ, ЯНВ 
HEH, РКА УВЕ ЯЕ ON. WAER k 5 0 一 
Teo ЕЯ ЕН] ЖЕ АВО АЈ, ЖЕНЕ 
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ЖЕ INE SUB BE FEE PJ, ТЕЗЕ КНН Ж ЖЕШ Е 
ЖЛ. Анта n op RI ELA RR 
Bim BERNERS Aihm, 05, mE 
每 一 步 都 沿 最 速 上 升 方向 走 ， 我 们 就 会 沿 最 短 的 路 线 到 达 顶 
ER. 由 于 这 条 路 省 鞋 尽管 可 能 不 智力 )， 看 来 这 在 某 种 意义 
ТЕЖ, ATARFE- PHRA. 
fác-1 dE ЯНИЕ. CARH E 
JE. ИЕР K OO UR. BREAKIN. CE 
直接 置 到 柄 底 并 飞 到 那儿 。 然 而 近视 使 它 只 能 洛 着 栈 药 表面 
有 疏 行 。 己 于 它 只 能 按 园 定 步 长 (苍蝇 步子 ) 行 走 ， 所 以 每 一 步 
都 要 谨慎 地 选择 方向 ， 以 恒 走 最 短 的 距离 用 最 少 的 时 刘 到 和 达 . 
芳 底 ,每 一 步 都 沿 着 负 梯 度 方向 一 VYf(x) 走 ， 就 可 以 实现 这 
一 极 小 化 ， 因 此 ， 在 每 ~… 步 ， 敬 蝇 从 所 有 可 能 的 下 降 方 向 中 
选择 下 降 得 最 快 的 一 个 。 换 言 之 ， 它 选择 最 束 下 降 的 路 径 ， 
注意 到 近视 的 苍蝇 和 梯度 向 量 ， 二 省 都 只 是 利明 了 在 每 点 解 
局 部 的 信息 因此， 这样 只 达到 局 部 最 优 ， 
846-2. 考虑 一 个 停 在 任意 形状 的 碗 沿 上 的 小 物体 。 候 
如 物体 沿 矿 内 侧 下 滑 时 ， 摩 榨 力 是 够 大 ,从 而 可 以 忽略 惯性 ， 
那么 它 会 在 每 一 点 沿 负 梯 度 方向 请 下 ， ARTE AEE 
FERA pok КИЕ ЖЕЕ. - 
сй) 现在 推导 问题 
minf(x) 
的 最 速 下 降 路 径 ， 其 中 x 放 n 维 向 量 ，f(x) 是 可 微 函数 ， 
任意 选 x， 为 出 发 点 ， 要 确定 一 邻近 的 点 Xo 十 dx 使 得 
Рх. тах) (xo) 
实际 上 ， 要 选择 dx 使 得 差 
їх.) fout dx) 
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最 大 . 沿 最 所 下 降 路 径 相应 于 向 量 dx, 有 路 得 增 量 ds ,定义 作 
(ds)! = Y (dx) 


i=l 


Ифах нах h 4x, 
现在 选取 dx41ds 使 得 变化 率 df /ds 最 大 , 由 于 


df _ vof ‚ах, 
ds с дх‹ ds 


最 过 下 降 路 径 可 通过 选取 。 dx,[ds 以 求解 了 面 的 问题 得 到 。 
期 解 


B 一》 了) 


可 以 用 Lagrange 莱 子 法 求解 这 个 问题 ， 这 时 


T E реў 
x5 8E A VE 29 
Чазаа L = Lz ad 一 0 ， 


4 ds 
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бй | (6.1) 
vai- Y (ee J- (6.2) 
解 (8.1) 和 (5.2) 得 到 | 
| dx, — 1 Of 
ds 24 x, 
ч 211'% 
xP DG] 


000 0 ME 
或 者 dx, (ху — 0X: e 
ds ш 


PCIE 


L £l 


i-i, (5.3) 
由 于 整个 分 母 是 正规 化 轨 子 ， 可 见 最 速 下 降 路 径 的 方向 用 榜 


韶 钠 量 给 出 , 求 极 大 问题 选用 下 梯度 方向 ЖИЛИНА Я 
BEDI. 


106-5 证 级 旧称 函数 沿 梯度 路 径 单 调 下 降 。 


СЕ) 

of of 
df К: of dx, . 2.95. an, 
ds Zao ds “È 
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为 揪 呈 内 的 项 非 仙 ， 所 以 平方 良 存 在 。 
жаки, >o 


"RUNS, T eco 

5 
16-4 证 明 沿 梯度 路 径 不 能 十 有 限 路 程 测 达 到 /x) 的 
СЕ) 从 例 6-3 得 到 


Эт, EREA 


Al, ЗЕЛЕНЬ Е, ofJox, FIERA HE df/ds W 
-小 .下 极限 的 话说 ， 因 为 


Of (у, 一 
3x, 0? 0 , t=] , 


不 能 以 有 有限 步 精 确 达 到 最 优 鸽 。 当 以 常 速 s 运 动 时 ，ds 二 vdt 
在 有 限时 间 内 也 了 不能 达到 最 优 值 ， 

#65 FRA ЛИЛ) ==x? 十 2%3 的 家 小 的 梯度 
路 径 ， | 

(8) ЕЯ 


2х: 
viel | 


AER IDHE 
ах L kg Of 2_5кКу, 


ds Ox, 
dX; к Of — 
ds Ку, Кх, 


„161 = 


ABE RU 范 化 因子 


K -| 》 (еу 


i=l 


因此 
dx; = dx, ds — 2х. 
dx, ds dx, x, 
或 dx, > dx, 
Xs Xi 
pug inx,-212x,--C 
或 In*:-c 
Xi 
或 X, 68x07 


Ре Жени. 


=» : 
А . 
<<, <, 


Е 6-1 


fée-6 证 朋 例 6-5 中 的 梯度 路 径 与 等 值 线 重 二 ， 
[Bl 如 时 两 条 曲线 法 问 量 的 内 积 等 于 0 WANAE 


: 162 + 


REZ. KH, ЗНАНИЕМ 


n, =, | 
、 - 4X; 
梯度 的 法 向 量 为 
28?x, 
“=| | 
-一 1 Jj 


туп A838 71 
| Г 2° х1 
(пее а] [matri ma) 
_ 一 上 a 


6-5 AER, "НИЕ T0. 


=. HEH 


最 速 下 降 路 径 的 连续 方程 由 (6.3) 式 给 出 。 事 实 上 ， 通 
过 在 米 拟 计算 机 上 实现 这 个 方程 ， 洒 卫 连续 地 计算 x 的 函数 
8f [àx, ,i 一 1,2,…,8 就 可 以 求 得 问题 的 最 优 解 。 然 而 ， 实 际 
上 经 常 是 在 数字 计算 机 上 解 这 类 问题 ， 基 此 ,需要 方程 (6, 3) 
的 千代 形式 ， 这 个 近代 形式 称 为 燃 度 算法 。 

一 般 地 说 ,一 个 算法 就 是 一 项 利用 点 xs € Sc ЕЯ 
LEITET OE TRE BE X єс ЕЗ ИШ, 

将 方程 (6.3) 写 作 


dx = tds 9170), iz1,2,-,8 


就 得 到 梯度 算法 ， 其 中 Of" Ox ,表示 规范 化 梯度 的 第 ;个 分 
量 。 将 ds 看 作 所 选 步 长 如 ,梯度 算法 可 表 永 为 
x+ =x HETS?) (6,4) 
' 163 


JUS TORBUK FIER, R0. 对 求 极 小 问题 ，R<D Vf x» 
理解 为 在 点 x? 的 规范 化 梯度 。 

WR RED, КЛЕН ИРЕН, 
BATEAS RIRE, паке, ЯД, NUR 
RER, M- FARRAR, НЯНИ. 

16-7 95-5, Waca, 0 m (4,4), HRH 
度 算 法 的 效果 ， 

[E] 结果 如 图 6~2 所 示 。 


046-2 


HERRE, ТЕКӘ АН, ДЕЯ ВЕ 
小 步 长 。 一 般 地 ， 当 远离 最 优 喜 时， 需要 大 的 步 长 ， 而 当 株 . 
葛 主 要 出 现时 НИК. ДИ ,有 许多 方法 可 供 采 用 
例如 每 做 m ВЕ, ЧЕН, ИЮНЯ 
小 步 长 。 这 些 竺 殊 的 方法 经 常 咏 行 之 有 效 的。 但 有 一 种 选取 
步 长 的 方法 ， 趋 干 使 所 玛 算 的 步 狐 最 少 ， 这 样 的 方 潜在 下 一 
Bb. 


‚ 154. 


=. ЖИВЕ 


在 最 优 梯度 方法 中 ， 我 们 沿 x? 点 的 梯 席 方向 运动 ， 直 至 
这 到 (关于 这 个 方向 的 ) 馈 部 航 小 点 为 止 。 困 为 如 果 继 续 运 动 
Жин, 月 标 娩 数 全 将 增 大 ， 所 以 这 时 要 确定 新 的 梯度 
YA(X?*)。 这 个 方法 会 碱 少 所 算 的 步 数 ， 但 出 于 为 确定 新 的 
步 长 必须 解 求 极 小 间 题 ， 央 而 吉大 了 每 一 步 的 计算 量 。 册 干 
РТР КЕШ, ПНТ Е АЖАТ, Е 
Е. АД PERCHE BS E ZEE ORIM. 

Е ЖЖЖ ДИН — ЖЕНИШ, ЗЕ КЕ, SR Fx *1) 
WERU Рух) МН, RAATS A 

та? ERN fT) 


一 旦 x 联 定 ， 它 只 是 的 函数 ， 这 一 极 小 问题 的 必要 条 件 是 
д1 жеу A= 0 

#5-3 MEM 
mia| Оу х"@х | 

的 最 优 步 长 。 

[М] 在 这 种 情况 下 ， 最 优 步 长 可 以 解析 地 确定 刀 下 ， 

Vf(x?)-Qx? 
x?* my | Ox? 

But, RND 

f (3*1) 5G Qx*)" QU iQ") 


* 1657 


- roce. +kxrQrQx 十 pexrQzQsx | 


前 最 小 
f= [170x709 2xr 0" 0х | ›= 9 
EKTRE, В 
" х702х 
|| е» 


pu, ЩЕ - 
如 时 一 个 算法 有 
lim V Р(х?) =0 


ИЕ ИИ, ATORE, 0 是 正定 的 ,外 方程 (6,3) 
给 出 的 梯度 笋 法 是 收 仇 的 。 然 而 ， 正 如 例 6-~4 所 示 , 这 PME 
法 在 有 限 步 内 达 不 到 最 优点 。 当 用 最 泡 步 长 法 时 ， 梯 度 算法 
АВС ТГ), № 


Jim Ley ey = lim Кх?) _ 


ГР) sj SSE 
HR<, KARETO ZAA, Ил 
ie d IKE SENE PER. 

AP IHE EUER ВСЕ НТН К, AARRE 
ПВО. 

96-9 тах + 221 


Pee 


» ХАТТЕ КИЙ БЕП ЗЕ ВЕНЕ Re s A 6-1 
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ен, ШИЕ ЕЕН» S2B:3uumRGEA,ITHEXT 
> 二 22 
问题 就 转化 为 - 


nina ty 
түй 


SEREN. ИЕ, девон, SUE TT 
НО. 

由 于 梯度 算法 只 用 了 梯度 的 局 部 信息 ， 所 以 它 收敛 到 局 
部 最 优点 ， 究 竟 收 敛 到 哪个 局 部 最 优点 ,依赖 于 初始 点 的 选 
EM 

例 6-10 性 虑 如 图 6-3 所 示 的 曲面 ， 它 表示 由 一 道 山 Ф 
连接 起 来 的 两 个 山峰 。 考 察 初始 点 分 别 为 4，B 和 C HRE 
XE. 


图 6 一 3 


[#1 从 点 4 出 发 培 度 路 径 将 收 竹 到 局 部 极 大 六 一 1000， 
鲁 从 点 召 出 发 梯度 算法 将 收 敏 到 局 部 报 天 户 一 各 00。 NAC 
出 发 的 梯度 路 径 越 过 山岭 到 C MC ' 的 梯度 方向 又 往 回 指向 
C. 因此 ， 老 两 步 后 ， 几 平 没有 向 两 个 极 大 信和 点 中 的 任 何 一 
点 物 近 。 洛 山脊 (或 山谷 ) 的 信 况 是 梯度 算法 的 障 焉 之 一 ， 然 
m. SARREREK EILANNER RRE, AB 
ША XR S, 
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ELDEREN EREA RERS, F 
典型 的 一 种 算法 是 | 

x sa, th FOP) E RS EI!) 
这 里 用 到 了 前 两 步 的 梯度 方向 ， 若 和 和 ,是 最 优 步 长 ， 则 这 - 
种 算法 四 做 平行 切 缕 法 或 PARTAN 法 ( 见 问 题 t-11)。 

ВИ, НЯ, ,主要 取决 于 初始 点 的 选 定 。 
.-- 般 来 说 ， 初 始点 越 绕 近 最 优点 越 好 。 为 选择 合适 的 初始 
点 ,通常 有 必 对 在 称 网 和 格 上 直接 计算 jx) ,对 非 间 峰 情况 更 是 
M. c 

终点 同样 是 重要 的 ， 因 为 按 定义 ， 一 种 算法 如 果 不 给 出 
停 步 规则 会 无 限 地 继续 下 去 虽然 总 想 使 停 步 点 尽 可 能 靠近 
最 优点 ， 己 最 优点 是 未 知 的 ， 因 此 不 可 能 直接 度量 f(x?) 一 
F(x*)。 最 常用 的 规划 是 当 F(x?) 的 改进 率 降 低 到 某 个 正 的 汝 
ЕН. ЯК, ЕЖА, РЯ 

убх?) РО) е 
对 极 大 问题 则 是 
ркт) (хе 

由 于 在 点 x* 必 要 条 件 成 立 ，WHf(x*)=0， 两 个 另外 的 选 

к 
nil anle 


或 当 


я , 
9f (ур 

ие”) = 

Ве. НЕНИЯ 

算法 并 用 最 新 钓 岂 个 点 握 合 一 个 二 次 曲面 ， 把 必要 条 件 应 内 

于 二 次 曲面 则 得 最 优点 的 近似 第 。( 见 问题 8-12,， 也 见 二 次 


- 188^ 


н.) | | 

贯穿 本 章 ， 总 假定 可 以 得 到 梯度 向 量 的 解析 表达 式 ， 然 
后 可 在 茶 个 需 模 的 点 计 信 ， 在 梯度 不 能 解析 地 求 得 时 ， 在 每 
个 点 X? 上 可 以 通过 作 一 小 扰动 或 有 时 要 用 实验 近似 地 确定 ， 
内 此 


ðf еру JO T Ax) — fx?) 
ax, x )== Ax, 


”其 再 Axr 为 一 向 量 ， 除 第 ?个 分 量 值 为 Axi 外 其 条 分 量 剖 是 : 
替 ， 甚 至 当 梯度 能 解析 是 求 得 但 非常 复杂 了 时， 也 常常 从 计算 - 
效率 的 角度 提出 这 种 实验 的 方法 。 


习题 与 题解 


6-1 ШП 
f(x) 3x, axi 
ВОЗ, ЗЗНШЖАХ Я АЕ А ВЕЕ МНЕ, LUE— 
$ ag x x1 УЖ ЗП ла, 


Ej 6 一 4 
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[H] 解 如 图 6-4 所 示 。 
6-2 用 解析 方法 求 出 问题 6=1 的 连续 梯度 路 径 ， 
[8] 梯度 路 径 出 方程 


ds дх, ' к=1,2 
=н, ИЯ 
dx, е d, — _ 
ds ky ds — СЕЗА 
dx, _ 8 
dx, 3 2 
bi 
z: dx; _ 8 1 
кз 
或 
Inm (eat) 
ЖТИ E YES Ж 
хат лер] o o a] 
5-3 给 出 问题 6-1 的 祥 度 算法 的 离散 形式 
хех? РАМН?) keo 
[EI 由 规范 化 境 度 得 到 
‚ t 0633 
Урва о 
ЧИ: 
хв"? u ЗА __ kc 0 
y 9T 64(x1)* ' 
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^o gka? 
ure. ETNE 
6-4 MEE ER, 使 得 在 第 ?次 选 代 中 ， ЖЖ) 0-0 
лена. 
(W) 对 梯度 算法 


xyP*1—yP.L Ax? 


Ax? eb, f(x”) 


ko 


хуу 


其 中 


取 一 阶 近 似 
. 9} of ... 
Аў(х)= jx, АЛ: t3 Axe + 


301 ROINA 
ANGALIH 
== ВХ РСР (х?) 
ЗН ОТАН АО”) CIT Г ВЕС, WJ 
Арх) (хт), бека ` 
b. cef (x?) 

, [IG уо) 
Жанин сы0.1, М РОН. 
6.5 设 f(x) 二 次 可 微 , Eie iua. 

[RI ДЕРЕ (ху Тауіон н, Фф XT 二 EL 
的 项 ， 则 得 


Пек) = Ки) ГУО ) T Ax --Ax TH )Ax 


SUE 


-E НХ’) 2 Неѕѕен і, ДВЕ | 
Аха V f(x?) ЕЕ 


所 以 e | 
+} у= о?) „(Зу [угуу + 
Сун) Y7 " 
(УТУ, TD HOT yv feo 
且 


[TS 
СНЫ 


E jz 一 上 PX тох 


- B VG) Qu) «0 


WE d X Typ dci x 3 06-3 але n РАКЕ Hw. 

6-8 FHAA T. 6-9 пар РК, ВЛ 
LR Gb О — 7 

[W] 在 俩 6-9 中 


TA? 
f) р Он 0400 
Яг 


(x11) +(x+kQx)'0(x+kQx) 
= 70x 28х70 2х 22х70 3х xL , 
代入 名 得 到 


+ 172. 


ОВЕН, ЕЛЕ ES, ДОН H: $$ (E 
ЇНА ЧУЖЕ, TE 
D 2 
d $us] 


fol $, dm ILL. | 


н .. 
b Ул: бф. 
Ln f=1 Ax? 
r A 


为 了 在 有 限 步 p ЫЕ ЖИН, Bf ` 
Их?) =0 
要 求 


E (ўн). 


яе Аа ЙО, ETT TM 
и. ЖЖ, ЧЕМ В НОЕ ШЕРДИН К, KT 
会 出 现 这 种 情况 ， 一 个 例外 中 对 所 有 区 1 HEA SAHR, 
在 这 种 情况 下 ， 对 任意 的 x? 这 个 方法 都 是 一 步 收 化 ， 这 时 二 
JE T8 ВН М... 

6-1 urhe RUE RR AN НР ЖЕЗ. 
[证 ] хх eee АЫ ууу On), 
dH (МУР), VfGO?))-0 
НИЕ, Ж 

(VIP), роу) = 0 

则 这 两 个 向 量 正 交 。 对 最 优 梯 度 算法 ， 必 须 有 


Df х?*1 — 
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РНК Ка”) о 
由 此 得 出 
(ела? evt Gn). VE) 
这 就 是 正 交 性 所 要 求 的 关系 式 。 
8-8 对 于 二 次 型 
f) = » x"Qx 
证 明 最 优 宰 度 算法 相 邻 的 两 步 是 正 交 欧 . 
[证 ] 出 问题 6-7 可 知 
(VA), THN)=0 
其 中 E 
TF) = 0х 
VfG'2-904-kQO 
PEEL 
R . x!Qšx 
代入 正 交 性 关系 式 ， 得 到 
бох, Ох) xr (Q eros 


Ох 
хех xzQz:x 一 0 
6-9 将 最 优 蝉 度 算法 用 于 二 KM 
fG)- LG r2) 
起 点 为 (4,4)， 并 证 明 = 
Сух), Vf(x'))20 
[证 ] 写成 矩阵 形式 
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f) x10 


其 中 
1 0 
|, a 
gut | 
1 0 一 
e c. 
vio-| "| 
аа 
0 4 8 
ги ов 
所 以 
"E 
- EH E 
9 
m | 
— 
° ж 
16 
` 8 
Vfon- M 
ier 
nj EE 
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^" 16 
ж | g. 
Уло"), у! у= {4,31 ,| 0 
_ 


从 图 6-5 RATES, хуу 27 HE Rd UN u ЙЕ 
x. . 


图 6-5 


_ 810 AQ, 2) RE IRUCRUE Еди RE 
求解 


- min2xid-2x,x,4-5x1 
x 


INE) ERER 


- 


27 


X 
10 J 
4x, t 2x, | 


fosh ; 


Уго 
2X1 十 10x, 


- FTE- 


TÀó 281 " 5136 3207 
ее om 
сов 104) |320 1096 

站 问题 6-5 ET ко |, 


# _ 2021 tabriz tioi 
136x2-Fe40x,Lx, + 1098x2 


ko —0.122 
Br 以 ! 
(2 : А | 1.5117 
x' = — 0.122 | =| ! 
—345 ^. —16 ' L —0.048 í 
A 


kf-—0.156, xt 
kj-—0.141, Хї=б. 
ki — 0.134, хі 
6-11 对 于 个 变量 的 一 次 函数 ， 平行 切线 法 LPART- 
АУ РЕКА, ЕРАВТАМ Am, git 
点 x? 后 ,随后 两 个 点 x! 和 x 出 最 优 说 度 算法 确定 ,然后 党 方 
ххх, ОДЕТ, 
PSI 
ХО) = х1 +22} 
ЗЕБ РАКТА М А НЯ, УЕ mukiy sus 
SEU RE e (0,0). . 
[HE] КНР 


1 „Г 2 Ü 


EL 


wes est fled? а 


ЛР 
pr. 451165} 
821-64} 
BR 
Ак — 29 
72 
20 ` 
[5 е0 9 
Хх! == | — 0.2778 上 
ES -204 |_5 
g- 
= Š 
1 12 


x* 1х9 хр, БЕ 


Х%==х? 6,009 —х?у=—1. | 


40-5004, J 
108 | 40... 5004, 


现在 
(x) = Сов: (40— 50085) + 2(40— 5008, )* } 
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dd X tof ok, = = 40/500, АТМ 
1 r40—407 ГО 
PPM 
108| 40-40) Lod 
:PARTAN 算 法 怡 好 三 步 收 襄 到 税 小 点 ， 这 三 步 如 图 6-6 所 


E 


Ej 6—8 


6-12 在 最 优点 邻近 梯度 算法 因为 要 用 小 步 长 ， 所 以 效 
APTF., PERAH- ARRAUN ERMITEA 
上 的 几 个 点 拟 合 一 个 二 次 曲面 ， 然 后 通过 求 二 次 曲面 的 家 小 
译 到 最 优点 的 近似 值 。 

将 有 定 步 长 R 一 0.93 的 粮 记 方法 用 于 问题 


min[y(x) 一 ec +2412] 


[E] 假定 最 后 三 步 是 
» 118 + 


xz0.03, f(0.03)2:et-9*1* 
x=0.00, f(0.00) =е1:" 
х=—0.03, f(—0.03) 29-718 
列 在 求 通过 这 三 个 点 将 二 次 函数 
f(x) max? хе 
ERZI 0 Еб, blc 


. 8=5.55, 5622.33, (2.17 
Жо. | 
Seen 0 
^x b o = 
x* 一 天 = 0.285 


通过 对 f(x) 求 极 小 得 到 真正 的 极 小 信 点 ， 
Of — (ut i Jexp(2x? 5 4x41)2-0 


x*=- 0.250 
在 这 种 情况 下 ，f(2*) =2.400, F(x*)=2.400 (计算 准 
确 到 三 位 小 数 )， 所 以 误差 小 于 0.1 哪 。 注 意 用 步 长 0.03 按 梯 - 
度 法 四 走 七 步 到 达 x 二 一 0.24， 在 这 点 用 一 0,24) 仍 有 类 似 的 - 
精度 。 为 得 到 更 高 的 精度 ， 就 划 求 再 减 小 步 长 和 继续 进行 选 . 


4 充 
613 AAU DAG, A ERLEEN, M 等 式 
«ПЕ 


max38— 8(x,—6)* —4(x,—6)* 
x 
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6-14 从 点 (2, 一 2,1) HR., MERRER ERUR 


解 minx?-4xi-2?xi 
x 


6-154 21(2,— 2,1, ра, НА 


min xi+xi+xi+x 
x 


BEN 416-14, 
6-16 MERIKE "出 发 ， 对 二 次 型 


f) -xic5xi 
ЕВЕ, Hi SIR SEE ie Bl. . 
6-17 对 问题 t-16 用 固定 步 长 二 推 射 离 元 的 梯度 算法 ， 
对 工 =2 从 点 (5,10) 出 发 按 梯度 法 走 五 步 ， 纵 出 各 步 结 果 。 
6-18 对 工 一 4 重复 问题 6-17， 但 当 Fxz)y 开始 增 大 时 ， 
L 减 小 一 半 。 
6-19 ЖО 正定 ， 则 二 次 型 
f(x) x"Qx 
的 最 优 梯度 算法 是 收 敏 的 : 
6-20 在 第 四 章 中 说 明了 如 何 用 Lagrange T iE ftia] 
Riminf(x), Side, «0, imr, 2, ет, BELLI RUE 


算法 求 


min [Lote foo Şa] E 
i=l , 
6-21 从 点 (6,6) 开 始 用 于 ARTAN 方法 三 步 确定 
f(x)maxti axi 
ag Fiant SRL. 
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第 七 章 约束 梯度 法 


使 用 梯度 方法 来 解约 束 景 优化 问题 已 提出 了 许多 的 算 
洁 ， 虽 然 这 些 方法 很 多 ， 以 致 不 能 希望 在 此 作 广 泛 的 论 
述 。 但 一 般 说 米 ， 还 是 可 以 分 为 两 大 类 1) 边界 跟踪 法 ， 
(2) 惩罚 函数 法 。 本 章 讨论 前 一 类 ， 后 一 类 将 在 第 八 章 中 论 
š. 每 一 大 类 都 讨论 几 种 算法 ， 

.在 边界 跟踪 法 中 ， 有 许多 专用 于 特殊 类 型 问题 的 算法 ， 
一 类 特殊 疗 题 是 目标 函数 或 约 东 是 线 竹 的 。 这 时 ， 许 多 算法 
都 是 利用 非 线 考 函 致 的 线性 近似 ， 从 而 可 以 将 线 生 规划 的 求 
解放 入 到 逐次 改进 线性 近似 的 算法 中 。 这些 方法 与 某 些 进 一 
步 的 尝试 相 结合， 通常 还 可 以 适用 于 目标 函数 和 约 案 都 是 非 
线性 的 问题 。 本 章 中 讨论 的 可 行 方法 和 楷 度 投影 法 都 时 于 
这 种 类 型。 

.对 于 约束 是 线性 的 ， 目 标 函 数 — 
Qn панава, ОНИ 
ЖЭ, ЕТЕ. 

尽管 第 六 章 中 讨论 过 的 梯度 算法 还 不 知道 如 何 使 它 快速 
笋 伊 ， 但 是 它 的 应 用 简单 并 可 用 于 大 多 数 可 微 的 非 线 性 函 
数 ， 由 于 这 个 原因 ， 床 章 限 于 讨论 用 梯度 算法 解约 束 最 优化 
向 题 的 方法 ， 
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一 、 有 不等式 约 束 的 边界 跟踪 


在 第 六 章 中 ， 假 设 应 用 梯 记 算法 的 可 行 墟 是 整个 空间 
Е". АЛАА, 可行 域 被 限制 在 某 个 集合 SCE* 
ПРЕЖНИМ Е, НН, WEE REUL 
一 直到 达 约 柬 边 界 。 然 后 另外 选 定 一 秆 方法 用 来 改进 目标 函 
数值 而 入 不 离开 可 行 域 。 踪 常 这 要 依 离 梯度 路 径 并 且 常 常 是 
EURED. AR. PAJARRE.. = 

38 ib RRE. DFES SEDA TTRI £L 
从 自 标 函数 的 梯度 方向 改变 为 被 破坏 的 约 东 的 禄 度 方向 。 由 
РОВЕР "ЕВЕ, Хе 
效 数 梯 庆 方向 和 约 东 梯 麻 的 方向 ， 因 此 称 这 个 方法 为 跟踪 法 
(Rhemstitching), 

PH-1 DEBE, Q. E T2 

| ани ОС. 

WE Ый a ВА”. 
єн ЕГ etas: pe c PEWS 

[9 B SRR ER Ba ӨГ» 


| E 


Xs 
_— A| 1 
IE x" рт, НКУ 
x"ti=xP—1.0V f(x?) 
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2; x” 在 可 行 域外 .风力 


x? ox? EL Ogi?) 


ВАТ. ЭВ 
x$—1, — x10z-4.50 《可 行 点 }》 
$120.89, x123.50 【可行 点 } 
x$20,76, х2=2.50 《不 可 行 点 】 
xi-1.40, x$23.21 《 训 行 点 》 
X£—1.05, x122.30 (Жау 
4551.76, x2-3.01 (я) 
x1=1,37 2 一 2.10 (FRE A) 
х1=2.08, x1-2.81 (Rf fT) 


X, +4, =4 
B1 
AE RB ЫЕ ЛЛ ТЕЁ HE x,74— 3, b. WR 
д 


3x, [x?2(4—x,)*]2—0 


PE1-2.6607, x121.332, EEUU SA 
- 184. 


6. 707 
0.707 | 


-l 


уон) 0. вабо) | 
0.70 


因此 ， Жз, жн иан АР; R RER 
小 相等 ， 方 向 相反 。 | 

ПИН НЫ BN W3REGE W 9, H 
ЖЕН КЖЕ ‚БЭЙ. ЖШ, ПЕ, W 
жанан, 固 此 这 种 算法 给 出 了 一 个 自动 停 步 的 准 

。 在 这 种 情况 下 ， 当 出 现 

—Vf(x*) - Vgix*) e. 
就 停 步 ， 其 中 二 是 选 定 的 适当 小 的 数 ， 

ВЪВ ЯТА НЛА Е, ЕВ НЕЙ RAR ж: 
АВАТ RS Е. а ТТАС тва SO ЯЕ 
时 就 会 出 现 这 种 情况 。 

Й 7-2 给 出 关于 在 图 7-2 中 的 等 值 线 使 用 锁 边 算法 肘 
ИЖЕ. UREA A АН B ЛЕНИ. 


+2 ЕК 
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[М] 从 4 点 出 发 的 路 径 得 到 局 部 最 优点 . 必 ， 它 也 是 
-全 局 最 优 ， 从 B 点 出 发 的 路 径 得 到 局 部 最 统 点 B'， 但 它 不 
是 全 局 最 优点 。 | 

如 党 二 章 所 还 ，- 民 保证 求 得 全 局 最 优 ， 只 有 或 者 规定 所 
有 的 函数 都 是 凸 的 ， 或 者 取 足 种 多 的 不 同 的 初始 点 ， 以 便 求 
得 所 有 的 局 部 最 优点 ， 一 般 来 说 ， 当 驻 点 的 数目 不 知道 时 ， 
所 需要 的 初始 点 的 数 月 也 不 知道 。 在 这 种 情况 下 ， 为 了 先 得 
到 关于 有 曲面 性 质 的 某 些 信息 ， 有 理由 在 可 行 赴 上 对 f(x) Ж 
Як. 

AUPOROGRADEBDE, Т ЕЛЕЕ НГЕ АРЕНА ЛЕЛЕ 
边界 上 。 在 荣 些 情况 下 ， 一 种 好 方法 是 先 撒 开 约束 ， 求 出 无 
约束 最 优 ， 然 后 验证 这 点 是 不 是 可 行 点 ， 如 果 是 ， 则 完成 角 
题 ， 若 不 是 ， 则 必须 求 最 优 边界 点 ， 这 时 ,求解 的 方法 是 
从 无 约束 最 优点 出 发 ， 沿 着 说 破坏 的 约束 的 梯度 方向 运动 ; 
如 果 被 破 环 的 约束 不 此 一 个 ， 则 可 以 把 方 尚 取 作 这 些 梯 度 的 
线性 组 台 ， 比 如 搜 乎 行 四 边 形 法 则 所 合成 的 风量 。 由 于 这 是 
在 从 不 可 行 点 朝 可 行 域 运动 ， 所 以 称 这 后 一 部 分 为 外 部 法 。 
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Ят5 对 于 图 ?3 中 等 信 线 所 描述 的 问题 ， 上述 A 
不 等 式 约束 的 方法 是 有 效 的， 因为 从 阴影 区 域 中 的 任 一 初始 
点 由 发 都 不 必 遇 到 可 行 域 的 边界 

[W] 现在 来 导 挨 一 种 比 用 锁 边 法 更 有 效 的 方式 沿 约 束 
边界 运动 的 算法 。 这样 的 一 种 算法 涉及 到 要 构成 目标 沙 数 和 
被 酸 坏 约束 的 梯度 的 向 晤 和 ， 于 是 沿 闭 约束 趋向 于 按 所 需要 
的 方向 运动 。 这 个 多 梯 席 黑 加 方法 由 下 列 算 法 定义 

. xP*1==x"+A,d'” 
其 中 若 x” 在 可 行 则 
=V f(x”) 

3 x" 让 可 行 域外 ， 


УК?) | 
= - т eh 00 


ЖЕНА Я, H 

"P (ху<о, б=1, 2,0-6, т 
BENE, НЕ hpc 的 情况 下 ， d? 的 方程 67. РЖ в 
ла, ЖИБИН, УК, (xP31E д 8 
必须 作 适 当 的 调整 。 式 (7.1) 中 的 和 式 只 是 对 于 在 x? 被 破坏 
的 m 个 约束 取 的 。 唱 然 当 目标 丽 数 的 等 筷 线 与 约束 楼 近 于 
平行 时 会 出 现 某 些 困 难 ， 但 这 种 方法 仍 世 生 一 个 走向 可 行 域 
内 的 运动, 在 这 种 情况 下 ， 可 行 态 书 册 可 以 改进 目标 函数 值 
REUTER TREFA ДЬ, MERTE. 

BTA МЕРИ ЕАК, 
RAAEN, 4.5) HL REIS CICUTER RE SE 16 6L 40 PG REI 
FK. 

[88] Ай, 4.s) HUE MU ГЕ 
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жү=1—0.111Ё 
. x,=4.5—0.995 Ë 
Ш, WA BES S EUH 
U X327-4—X 
nA ud x =[0.35, 3.1537, 
在 这 个 交点 土 ， 规 范 化 梯度 是 


VAR) _ ШЕ НН (2 (0.85) | 
ЛЕВ /2*(0.85)?-- 42(3,15)? | a(3.15) | 


sd 


0.993 | 


_ У) [om 
а(х) 11 т, 
НРО K T 3, AEC. DATARI J Tf 
号 取 负 号 ， 央 多 和 梯度 累加 积 的 方向 是 (有 取 外 = 一 1) 
а= 799 -| 一 0707 | 一 0.573 | 


| —0.993 j | 0.707 | ' —0.286 j 


хі+2 rick 


7—4 
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-这 个 方向 如 图 7-4 所 示 ， 注 意 沿 边界 运动 的 分 量 为 (1, 一 1) 。 

М т-а 我 们 注意 到 ， 虽 然 多 梯度 累加 和 的 方向 指向 可 
行 城 ， 但 它 还 不 是 紧 贴 约束 边界 ， 可 行 方向 法 克服 了 这 一 不 
- 足 。 在 可 行 方向 法 中 ， 每 一 步 都 加 进 了 -一个 线性 规划 问题 ， 
用 以 确定 与 目标 函数 的 襟 度 最 接近 的 可 行 方向 (从 再 也 是 最 


接近 约束 边界 的 可 行 方向 )。 
考虑 问题 
minf(x) 
x 


В gi(x)«o0, #=1, 2, +=, r 

-把 每 个 非 线性 函数 在 xP 点 展 成 Taylor RH, URE — ` 
阶 的 项 ， 则 | 
Их? d? ул f(x) OZ f(x?), d^) 

g t =g РНС а, (xP), dP) (7.2) 


AARNA 88 eR ЛУН, УР macte e 
` fOr to) — fT), d«0 (7.3) 
当 x SEP ЛЕ РИ ИВ, BB о, (х?) СО hb, m] 存在 
ENEEK А0, EH 
хэ РФА фе 
对 任意 方向 由 都 是 可 行 点 。 另 一 方面 , 当 x? 在 边界 g,{xz?) 一 0 
上 上 时, 风 由 (7.2) 式 ， 有 
(ХР) CU a (xP), 4#у<]0, 1=1, 2, eer (7.4) 
ЖИ, ЯН А20, ханты, HUE (7.4) = 
АН, MO Е Ext A DJ Е, ARAE 
本:{X) 是 线性 式 的 情形 ， 它 才 会 是 可 行 点 。 这 时 ，(7?7,4) 变 
成 . 
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(Vg, Cx?) ,d') «zo, fax], 2, эү Р (7.5) 


Эта xt! 是 可 行 点 。 又 和 目标 函数 的 梯度 方向 尽 
可 能 接近 的 方向 由， 我 们 引入 松 驰 变量 хоо, ПЖ 
等 式 (7. 3 和 (7.4) 变 为 正常 的 不 等 式 ， 然 后 解 下 列 线性 规 莽 
问题 ， 


max xo 


d? 
В (VC), а?) x 
с.х?) (79.00, dP)+x x0, i1, 2, 6, г 
xi A (fr is E 


mar xa (1.6) 
R£ хох”), d')«0 (7.7) 


x T(Vg (xP), dP)<<— g (xP), i1, 2, = r (7.8) 
当 x =0 时 ， 巴 不 能 再 进一步 改进 ， 因 而 约 东 最 优点 已 抄 
到 。 于 是 只 有 当 xo>0 时 ， 才 继续 解 问题 。 

由 于 4°” 的 分 量 无 符号 上 的 限制 ， 为 避免 无 恨 解 ， 必 须 
У, AA EA j 

dis (1.9) 

因为 我 们 的 目的 只 在 于 确定 一 个 方向 由， 所 以 只 关心 dy № 
В, Db b НЕЕ ERE СИ 1).: 

总 括 起 来 ， 算 法 是 。 — . 

1. УМРУ 9, (xP), ФЕТ, 2, =+, r, 

2, WH CT.8)—(7. 9) AG IB B e EE eL FR E Q 

3, xb x.—0, GU, - 

4. M|, MEPR R70, WA ИХ ZE Br 
"UC x"-AdP')uTO я Бї ЛШ. 
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01-5 对 于 例 Ta, Юа туны Ae 
(0.85, 3.15) HL 455, 

[M] BTHERAMS, ВЕС. Уа. LETAR 
不 等 式 的 意义 与 上 而 的 推导 中 的 地 义 相反 ， MEREANA 
Жатан 

шах х, - D 
E 
EE HVI (Хх), 4)<o: 


i C- Va(), d)«o 
dx, d,=<1 
其 中 


^ 0.134 | ^ 0.707 i 
Vi G) -| | VÀ = | | 
`{ 0.993 f, ` 


HRAS fE 
0.1340, -0.993d , s; — x ,. 
—0.707d, —0.TO'id ,«0. 
dil, dsl 


或 
—1 0.134 . 
ЫТЫ АН 0.893 917 1.008ху-—0.135@, 
diz-—d, 
Чайчи, 0.61 E 


可 行 域 如 图 7-5 记 示 ， 使 xe ВК di m1, da —1, 
39 一 0.993， 这 个 方向 精确 地 沿 图 7-4 所 示 的 约束 边界 的 方 
HJ. ` 
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i d, 


d; *-1.008 Ya -0.135 dr 


ины 


4 =- d 


7-5 


最 小 点 为 Xe-f2 667, 1 333]”， 在 此 点 梯度 是 
0 TOT 0.707 
УИ) = | | уо) 
0.707}, . 10.707 
线性 规划 问题 是 


тах Xe 
4 


ЯЕ 0.7074, 0. T07d ~ xq 
— 0.7070, —0. 707d; <0 
dil, 9251 
HORAE d ,=—d,, maxx =0, 因此 最 小 点 已 达到 ， 


二 、 有 等 式 约束 的 边界 跟踪 


对 筹 式 约 东 河 题 应 用 梯度 方法 ， 除 每 次 法 代 的 路 冬 必 须 
EUR LIN ЖЕЗ АР ИПИЕ АНШИ. RIE, TIRE 
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实 上 是 某 个 边界 曲面 ,显然 初始 可 行 点 也 必须 取 在 那个 曲面 


y 


在 等 式 约束 的 情况 下 ， 如 果 有 的 约束 可 以 对 


某 个 变量 明 


显 地 解 出 ， 则 问题 可 以 大 为 篇 化 。 那 时 可 以 用 这 个 约束 从 最 


优化 问题 中 消去 那个 变量 (也 就 是 消去 那个 约束 )。 


问题 就 对 


竹下 的 变量 求解 ， 再 用 消去 的 约束 来 确定 消去 变量 的 最 全 
值 。 在 大 多 数 非 线性 约束 的 情况 中 ， 这 种 方法 是 难得 可 行 
的 ， 然 而 ， алватавахюн, Bit EXER TP 22 ЫХ 


种 可 能 性 。 
8T-6 ”用 消去 法 解 问题 


minxi + хз + 
Hj 2х,+3х,+х.=1 
[S] 消去 xs 得 到 


X47]172X,— M4 
新 的 无 约束 问题 成 为 
тіп f(x) exi -xit(1—2x,— 1))*] 
ЭГ эж, Щ1—?лу—3х,)(—)=0 


à 
st — —2x4,T2(1—2x,—3x,)(—3)—0 


$J х*=0.162, x1—0.198, x1-1—2(0.162)-—3(0.198) 


=0, 082 
鲍 7-7 用 消去 法 化 简 问题 
max xit2xi-caixitxs 
,日 使 sitz tz; xum 
(x,—x,)2+ (x,—x,)!—2 
[W] 消去 x1，, 得 到 
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x =1—%£,— X X. 
新 的 问题 为 
max(i1-- x,—3x4,—x,)*-2xi 4-341 9-51 
В (1—2x;—2,— 5)! (4 —=,)2= 
于 是 问题 从 含有 四 个 变量 ,二 个 约束 简化 为 含有 有 宇 个 变量 和 
一 个 约束 。 | | | 
ЛЕП ЖЕН ЮЕ HEC S PR ИЖЕ. 
梯度 投影 法 便 给 出 了 这 样 的 一 种 算法 。 下 面 先 对 线性 等 式 约 
东 的 情况 进行 准 导 ， 然 后 再 给 出 该 算法 对 非 线性 等 式 约 束 情 
形 的 推导 . i 
考虑 问题 
min f(x) 


且 便 Ax—b=0 

Жкп ЈЕ. А тхл, men, Rit E S 
某 个 可 行 点 X7"， 并 要 沿 最 还 下 降 路 径 运 动 到 邻近 的 可 行 点 
х?--ах?, B 

H х” ЖИ, HEELAx?—b—0,. 29 х" 4 dx” t € 
可 行 点 ， 则 要 求 

A(x*--dX")—b-0 

НТ АНГ 
. Аах? =) | (7.10) 
XE РИО, 为 书写 简单 WEE Lf. | 

沿 任意 的 一 个 路 和 多 45, БВУ НИЕ dx, /ds, $1. 
2, --, п, ЦЕНЕ 


У (ин, = (аз 20 Qa) 


lial 
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ањ Виж. 1 
用 求 导 法 则 ， 这 个 变化 率 苛 表 成 ` 
di (SF) 4x (7.12) 


ds дхі ds 
.其 中 | 
A fx) 
ri dx; dx; BETI | 
ds | ds" ds; "" ds 


DESI A BOLGDRZINDLITIHE ЖЕ 
Lagrange Ж 


Е 


EEESC] 


必要 条 件 是 
Vas Әд, 9 +А? \ =0 | (7.13) 
dx 、 
V L= AS =0 (7.14). 
dx \т/ d DEL 
(В) ai 
JA (1.13) ЕН dx/ds, 43] 
dx _ 1 /of V : 
ds EK ТАУ) (7.16) 


3E QLLL6) SA (7.15), АША, 9] 
+ 195. 


„Мена нн)" cao 


Як 97 Аг) (7.18) 
Ж И НИЕ. ВСЮ аи 
A, BUB 

A — (AA?)"! A af (7.19) 


РЖ НЫ Ч АА kane ЖЕ. ЗЕ (0.19) КЛ. 
《7,18) 得 出 方向 余弦 | 


SESI A (A4) 1A) 23 (1.20) 


кни пй БЕШ, AC 2038 iB t0 Sis я R 
是 

xP ox? kh ,PS7f(x") ` (7.21) 
ЕЕ, он, 


Р=[1—АТ(ААТ)-1А] 


ВНЕ. ХЛ Е TE SEIL ZI SR OEC 
РЕЗЕ L. МАИ, A TRER АЧА, Арсо, 
PERKE, А20, 
. 918 ВЕЕТ НЕГ э НОЙ ЗЕРЕ ЕЕЕ Ж A FEL 
Ж, 
[NE] XH. жж 
9.(х)=0, $21, 2, =, m 
在 可 行 点 x? 作 线性 化 ， 得 到 
g OP Fdx g(x) FL 2, (х?) ах” 
» 196 - 


为 证 保 X” 十 dx? 的 可 行 庄 ， 上 式 必 须 等 于 零 PUR 


(Va, (x?) dx? =o, 
这 个 约束 和 (7.10) 是 相同 移 ， 存 这 里 


i-i, 2, "ө, m 


Г 99, 99 , 98,7 
| òx, OX. OX. | 
А=А(х?у<| 30: до, 203 
' ox, дх, 0X, 
Q9» дй» ~ до» 
t ox, àX: д. Хх” 


所 得 结果 除了 不 再 是 常数 和 矩阵 而 必须 每 步 重新 计算 外 ， 其 
ВТ. АНН. H THE YE BE P P B EXE 
А(х”у жЕ META E. ВИ S 点 x?*! 时 ,一 
般 地 下 满足 约 东 。 因 此 步 长 k, 必须 保 特 很 小 ， 并 且 必 须 在 
每 一 步 加 上 一 个 附加 的 过 程 来 确定 新 的 可 行 点 ， 以 便 再 在 这 
-- 点 建立 由 各 (xz+1) 所 定义 的 支撑 超 平 而 。 由 于 这 一 复杂 性 。 
而 且 每 步 都 需要 计算 P， 所 防 冬 麻 投 影 法 对 于 具有 高 度 非 № 
性 约束 的 情形 。 是 不适 宜 的 。 

例 7-9 ”把 梯度 投影 法 推广 到 具有 线性 不 等 式 约束 

Ах—Ь>0 

的 问题 中 去 。 其 中 外 是 mxn 维 矩阵 。 

[8] 考虑 某 个 点 x?， 设 Aq 2 K B: Á Hb gq" nik ҮЛЕ 
库 ， 对 应 于 在 x? 点 是 有 效 的 ， 并 且 在 下 一 次 选 代 也 要 求 是 有 
效 的 那些 约束 。[ 译 者 注 ， 此 处 的 有 效 约束 与 前 文 的 紧 约 WE 
EX, MAX 点 以 等 式 成 立 的 约束 。] 现 在 稳 度 投影 法 是 


к?т! кеВ, АТСА AZ) HA, T f(x?) 
=X RPV f(x") 
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FH h<0, XE ko, ОИРУ) 取 极 小 ， 
Ti EL ET BEER АА, DE fx) 达 到 最 小 以 
МАЛО, RECS RE РЕ НЕЕ 
A, E, Р, IEEE, №. 


= (А. AD УК”) 
的 某 个 分 量 是 负 的 ， 则 相应 了 这 个 分 量 的 约束 要 从 А: B 
z kD PEE, ВЭ] 
Рур) = 0 
I 和 А20 | 
. 这 个 过 程 来 自 kuho-Tucker Ж?Р, CRR А АРД 且 在 最 优 
BAS ЛЫН. ARES S ЖЕРЕ. 对 于 有 效 约束 : 
Ах? b=0, А20 
пнен A 的 相应 分 量 等 于 零 ， 


习题 与 题解 


TA .对 于 问题 | 
mingi +x? 
В 3x, 2x42:6 
р. X 220, х,20 ` 
ARRES, Mem, DAA. 
[R] 梯度 是 


231 | 3 
ул | vaco- | 
: .| 2x; qe 2 } 


зх? 是 可 行 点 时 ， 算 法 是 
. 188 + 


x 
enm vrais | 
Hx? 是 非 可 行 点 时 ， 
Xa+l 一 Xp 十 LH В 
1$ |» 
18 12 


如 图 1-6 所 示 ， 这 个 算法 收 黎 到 最 小 点 (下 1)， 


x; 


图 1—6 BE 7-1 
7-2 HFEA | 
maxzi-4xi 
В 6—3x,—2x,0 
х1 20, X. 
ААТ СО, ОВНА. XC D ES BC ЖЕЕ 
Же 
[M] 这 个 初始 可 行 点 的 梯度 是 [0，0]7 ， 算 法 得 不 到 
新 的 点 ， 即 x"t1—=xP ИНН 7-7 可 知 ， 锁 选 法 并 不 能 
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КИБА, D. РАННЕ, RIDE 
АЖ EK BRICK. ПЯТ 
的 极 小 ， 

MRRME Ж йй za Pan 上 取 初 既 可 行 点 则 算法 


к@зї(15, 12), sga 


3 — $ 
v(&S-5] v D-E] 
这 个 点 对 应 着 求 极 小 问题 的 解 。 若 初始 可 行 点 是 在 图 1-7 的 : 
三 角形 ABC 中 。 则 算法 收 务 到 局 部 极 大 (2,0)。 EEUU ha 可 
行 点 在 三 角形 ABD 中 ， MMWik E EB, з). 
1-5 яя И 
misxi--xi 
HR gi) = 9—x,xX4£.0 
求 多 梯度 累加 法 在 点 (2，4 .5) 的 方向 。 
[M] 在 点 x=-(2，4.5)7 处 ,有 


^ 2х1 70.4057 
М(х) = 2/ T я 上 | | 


2X, 0.913 
^ 1 —Xasd -—0.918- 
м ХТА а 1 (—0.408 


ЕД, AREF pop e 


х ШИ 7-8 BUS. 
= 200 = 


T-4 对 问题 


тах х? 2х2 


且 使 +х2<9 f 
求 多 梯度 累加 法 在 点 (1.67， 2.5) 的 方向 。 
Гм] ЕАХ=[1.67, 2.5 ТЖ, ЖШ 


Vf = = 


Уа(® = 
对 于 求 极 大 问题 ， 


ха | ax, 0.947 J 


| ZB [ose] 
2 at =}. 2x,] 10.830 


Vg(x) 


NEC 
ПУ У 


所 以 


T. 


M 0.555 7 Ded 
947) (6.830 0.117 


1 (| (ree 
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AKA ЖЕ 7- Эт. 


1-5 用 可 行 方向 法 解 问题 
min[—ln(i-cx,)—21n(14x,)] . 
BE gi(x)—x,tx,—2«:0 
X Z20, х, 20 
mesi (т. г). 
А ір 
[8] dorm | luos 
9009) 9-42-17 


.因此 x* 是 可 行 域 的 内 点 ， 所 以 问题 
шах Хо 
(GVf(x*), 4) <, 
РЯ 
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dr=— yf) 
CETTE E ELE T: 
у= i 
2 
1 十 Ya 


规范 化 后 得 到 
Vio = |! 
- коз = Zub. 


褒 此 方向 运动 直到 届 到 约束 ， 得 到 


ЕЕ 


这 个 路 径 邵 
и | 
тах X, 
BE xQHOV f(x), deo 
(Va), dOxo 
dixi, dixi 


图 7-10 所 示 。 为 确定 dt ЗН 


4 203 * 


其 中 


yro ` an PL удо) EE 
-—0,826 | - 0.107 : 
或 
min ху 
В d,21:168x4—0.535d, 
d,=<—d, 


аЬ, 1,1 
:这 个 问题 图 解 在 图 7-11 中 ， 得 解 


п exi) -2in dex) =k 


x tX-2 


x, 


d, 21.168 -0.505 2, 
di 


B 1-1] 
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一 RA ` 07. 
T | Xa =0. 346 
~ 1 


现在 我 们 通过 解 间 题 -和 — 1 я 
minf(x'-ERT) " 
жае» E. ФИ 4 En EE 


PERLE 


S C7 tQ - —0. 707 ela. 707 xd) 0 


Ш, WR$DA-—O.678, Шу: | 
un ха Жн 


Bru ^. 
4 220,832—0.101(0.678) 20. 33 


x1-—1.1684-0.701(0.678) —1.65 
在 x° ШЕБИН, ФИТА Я хо, BLAK (0.35, 
1.63) & UC A | 
16 对 问题 ?-3 用 可 行 方向 法 确定 点 (2，4.5) 处 的 方 
Tje 
[R] 线性 规划 问题 为 
тах X, 
НЕ xo 二 0.405 d,-F0.913 0,50 
Хо—0.9184:—0.408 4,= 0 
disi, d,«1 
或 者 dc —1.085x4,—0.445d, 
4.22.45%,—2.254 
d,=<1, d,=:1 
内 图 了 7-12 可 以 看 出 ， 当 di=1 时 X, 最 大 ， 于 是 
da= —1.095x,—0. 245 
可 一 2.45X0 一 2.25 
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所 以 dy 三 一 4， x | =0.507 


LI N 
d, =2.45x, -2,254, 


图 1—12 


这 个 方向 向 量 近似 等 于 图 7-8 中 的 岗 量 ， 那 是 由 多 梯度 累加 
方法 得 到 的 。 
11 用 可 行 方向 法 解 间 题 


minx, d-2x, + xs . 
1 
HfE-—62,—4x,—2x,- -3x] 2x3 Tai T.2580 


x10, XQ,Z20, Xgz50 
从 初始 可 行 点 L1，1，3] 开 始 ， 
[ж] ня 
x?! tcx? Ehud? 
其 中 d? Bie o x 
maxd?x, 

HE x (+(Vf(x2), d')s0 

xg (VgQ7), 4) g(x?) 
Br. E. h,>0, WE | 
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1 -. 
Vf = 1 Asg00- 


—6 +67; 


—4+4х, 


2 
一 2 十 可 %a 


县 点 (1，1，3) 开 始 用 这 个 算法 所 得 的 结果 由 表 六 ! 络 HE 


(Wagner, 1968), 


$^ 
517-1 
Ap) хр) | хр x? хр |а; d |d} kp 
0 6 1 1 3 |—1 |—1 —1 | 0.37 
1 4.51 j 0.621 | 0.627 | 2.027 | 1 | —0.67 | -i | 0.29 
2 4.11 | 0.918 | 0.460 | 2.536 | 一 1 $111 | 9.14 
3 4.09 | 0.781 | 0.557 2.188 | 1 ,—0.21| —1 | 0.12. 
4 4.05 | 0.900 | 0.5321 2.080) —1 | 6.83 | —1 | 6.07 
8 4.02 | 6.828 | 0.594 | 2.006 | 1 0.10 | 一 1 | 0.08 
9 4.00 | 0.869 | 0.625 | 1.881} 1 o | 一 上 | о 
10 | 4.00 | 0.878, 0.825 | 1.875 | — | — |— | 一 一 
最 优 4 0.875 | 0.825 | 1.875 
1-8 ЖЕ 


El 


HE 


f(x)=5x,— 3, --6x, 
的 梯度 在 X,. x. 平面 上 上 的 投影 ， 画 出 梯度 和 £ KDE Bu Ee 


[#1 ня 


У) = — 3 
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ЖЕНЕ ` 
P= [IN AT(4A?)- 'A] 


其 中 A=[0, 0,1] `` 


ЕД 
所 以 AAr 一 [0， 0, 1] 0 |= 
: | 1 | 
(АА?) =} I 
- mk -an aaao жшлш. ым 
(! ` Ü 0 4) ] 1 
— P =p о 1 o |- » [os ох 11 
| 0 0 12512. - 
го 0 1: 0 0 0 1. 0 
-| 1 Lr 0 Lr 1 
0 0 1 0 0 1 0 0 
”投影 为 | 
о [1 O оу р.57 55 
Руј (х) = | 0 1 O [ 3 +} 3 | 
0 0 05 в. 0- 
PENCE. x, 平面 上 的 投影 如 图 7-13 所 示 ， 
7-9 对 函数 


f= att 3x1+2x2 
重复 问题 7-3， 在 点 (1，1, СОЖ. 
[W] 梯度 是 


2x; 2 
ира, 1. -ee | - 6 
1» -1) 


4х» ep 


+ 508 • 


(5,73,0) 


投影 矩阵 与 问题 7-8 相同 ， 因 此 投影 为 


l 0 04r 2 2 
РУК, 1. Zr 1 o | | 8 Hel 
о во [4] Lg. 


梯度 和 它 在 жа, x, 平面 上 的 投影 如 图 7-14 所 示 。 


ху 


ы 


(1.6, 742 
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1-10 对 问题 
min 2+ 5х} 
В x 3x.—06 
ARTAN -2) 开始 ， 用 梯度 投影 法 计算 两 步 ЖЕ 
长 Rp= 3. 
[i 区 问题 的 约 东 年 阵 是 


А=[1, 3] 
4X; 
vio-[ ] 
10x, 
HEREA E | . 
ХР, I—AT(AA7)-1k)V7 f(x") 
-其 中 
1 
AAT=[1, 3]| |= 
[: | ,| 10 
(AAT)71—0,1 
新 也 投影 矩阵 是 
1 0 1 
P=, 1 H. bat, 3] 


C 0.9 —0 34] - 48 | 3 
=, | uM БАЕ 


规范 化 因子 是 1/(16.4y106)， 所 以 
Y 210 = 


一 2 

МЕР 
pd ? 上 高 F И 
L—1.952J 10, 1 —0.1 


如 图 7-15 所 示 ， 这 两 个 点 都 满足 约束 。 


Xi 


- H x!-66.3, - 0.1) 


! =69.15, - 1.05) 
x > ко 702, ~ 2 


图 1-15 
了 -11 从 点 (C0，1) 开 始 用 梯度 投影 法 解 问题 
min[—2x;— x5] 
Hf giGO——x5,T120 
gs O0 2 — 4x,— 6x HTEO 
(5 g (x)=— 10x1—12x5 4-152205 


g, 9 x,—0.54,220 
X 20, X220 


[E] НУЖЕН 9, >09 x,Z220, НДИ 
= 211° 


这 意味 着 我 们 可 以 不 管 约束 x 一 0。 去 掉 这 一 梯度 后 ,投影 
НЯ 


ЕИ | ү. -| | 
1 03 r—24 r—2 
көчөө, Н 


现在 我 们 沿 一 由 РНЕ, жЕ (0.25, 1)38 Si 2 Ж 
(3) 0, ERARE gs(x7 的 梯度 加 入 站 并 计算 


N 9 —6- r 0 ~iz ге 2 7—2 
16 —8 1l L, -в. Е 1 M 
于 是 可 以 不 管 约束 MOLD FNOROEI MEET 
BEM 


沿 一 山 方 向 运动 ,直到 在 点 (0 .5,0.834) 遇 到 约束 9:00 0. 
在 这 个 点 将 gs (0090 的 稀 度 如 和 人 到 站 上 ， 并 计算 


If 61 -281 r-4 -6 rn2 + 2-1.08 - 
^= | 1 | J | | p ] 
-22.13J Lego -12 J-l J U 0.57 


E 


TR они JR. MEREEN 


gr ad 9 0) 
=) [-10, -12] = = 
-12 21244 BERI 25 


=al 36 М (^? ЈЕ —42 | 
S зо 25) L-i J SIL gs 


Ж — 92 2; 5139 82 ,35)(0.938,0.469) 38 92] 3. g, (X) =0, ` 
在 这 个 点 把 94) =0 的 梯度 加 到 投影 矩阵 上 ， 并 算出 


11-1.25 Г] p—10 —64 12.69 
СН 
-一 1 —138) -—b0.5 12 ' 2 


由 于 APO, ЖАКИ. 投影 梯度 路 径 如 图 7-16 所 示 。 
1-2 用 梯度 投影 法 解 问题 


1 
maz| 6x; T4xQ.T2x4,— 3x1— 2x2 一 ELE 


В x, +2z x —4=<0 
从 初始 可 行 点 (0，0，0) 弄 始 ， 
[Mi 对 此 问题 ， 
. P484 


X: 


fs-2fs-8 
^ N 


ERE SEL) 
B] 1-18 
B — 6х} 
4 — áx 
= ? 
|2 一 本 Ye 
А=[1, 2, 1] 


Я AAt-6, (AAT) e 


гоо га 2 i - 5 一 2 —1) 
a 4 2 |= 2 
e| 
i 1 2 1 


-0 9 


x? 1x? РУК?) 
FS RB dx 7-2 8 Hi Wagner, 1969), 
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А; 


1-13 


1-14 


1-15 
1-16 
+T 
1-18 
1-19 


0 0 0 
5.547 1.189 0.793 9. 
B.53T 0.774 1.097 1. 
6.965 1.060 0.817 1. 
7.137 0.835 0.813 1. 
1.208 0.940 0,01 l. 
1.232 0.859 0.700 1. 
1.249 0.872 0.637 t. 
7.249 0.818 0.626 1. 
17.25 0.875 0.825 1, 


补充 是 


用 锁 边 法 解 问题 
ma 和 wi 十 有 a 一 
Hf 2xP-3xix5 
#120, х,>0 
用 锁 边 法 解 问题 
шах 3 x,--2X, 
BË (x,—2)'-(,— 0*9 
Xm, X.220 
用 多 禄 度 累 加 方法 解 间 题 7—13 。 
HARE RMA RRE 7—14, 
用 可 行 方向 法 解 问题 7-13。 
用 可 行 方向 法 解 问题 7-14， 
用 可 行 方向 法 解 问题 
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max хх; 
Hf x,—x,—1«0 
E 2x4--x,— 6x0 
x 20 
1-20 用 梯度 投影 法 解 线 性 规划 问题 
max 0.5x,-43-25, 
Hf х,+х,<6 
жд, 
2%, 5,26 
0.55. —1.2—4' 
1—1, X4.7:20 
从 初始 可 行 点 (3，2) 开 始 。 | 
1-71 写 出 用 梯度 投影 法 解 下 询问 题 的 各 步 ， 问 题 为 
min f(x) ` 
HE 9.0)50, £21, 2, =+, r, 
7-22 确定 梯度 投影 法 当 遇 到 形式 如 
хус, бе], 2, ==, r 
的 约束 时 , P 矩阵 的 特殊 形式 。 
7-25 Айтхя» ИН, ЛЕНЕ E RE 
(AAT) 是非 奇异 的 ， 试 给 也- 吉 应 满 尽 的 条 件 。 
1-24 对 问题 
min хїЇї-Ьхў}4-2х}—2х,х› 
Hü g (x)=2xz, x ;—4=0 
9.00) 25x; —x,—8-—0 
用 梯度 投影 法 进行 四 次 选 代 。 
1-25 用 梯度 投影 法 解 问题 ?7-19， 
1-25 XT [E Ra 
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nin xÍ-F2xi 
BS S Txm2 
x, T254,223 
用 梯度 投影 法 进行 四 次 近代 ， 
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ЖЛЕ Јр А 


ИИ T ARERR RIER ik БЕ 6 p| B 
的 方法 ,第 一 种 方法 是 设法 消去 等 式 约 来, 第 二 种 方法 是 ， 当 
遇 到 某 一 边界 时 ， 沿 着 该 边界 移动 。 本 章 介 绍 第 三 种 方法 。 
它 是 利用 秆 罚 函 数 把 约束 最 优化 问题 化 为 无 约束 问题 。 这 样 
就 可 以 用 处 理 无 约束 间 题 的 直 萎 法 来 求解 了 。 

ЖЖ. OMAE yH, Lagrange #140 иур 用 
来 把 约束 问题 转化 为 无 约束 问题 .本 章 将 前 明 使 用 直接 最 优 
1527 Ж ВЕ Я pp c 53 t НН) Lagrange REZ 
анж. 


一 、 一 类 简单 的 惩罚 函数 


考虑 等 式 约束 问题 
minf(x) 
H&9,(x)—0, i—1, 2, +з, m 
为 了 把 这 个 问题 转 北 为 一 个 无 的 来 最 优化 问题 ， 我 们 定义 新 
HEPA 


Р(х, K)-fG) Y К,а, бур 
3-1 


ROPIEEEOURCLD0)RURIEBIA ER, EE, mp 3 
МЕ, Eg JPSIKRRESUIEH 83 k. 3) K =o, d 
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REFERATER: К, оон, Шс НХ 
4 H5 ЛЕВУ Е К=ГК,,Кь, 9, Ka]? НЕЗА 
ЕА, РСА АТА У — ARE ИЕ ДЕ 
到 什么 程度 .在 大 多 数 问 题 中 ,约束 是 未 精确 知道 的 物理 现象 
РИ. ЖК: 的 选择 可 以 与 第 i 个 约束 的 准确 程度 
相当 ,在 且 标 销 数 上 增 洪 的 这 些 加 权 项 表示 对 于 不 满足 约束 
ЕЖЕТ]. 
$1351 КЫКЕ ЕН T ЛЕШЕ ЕЛУ: 
minx14 x2 
В X=} 
[№] RB AAE S MIB ES 
Р(х, K)=zI+x3+K(x,—1)2 
函数 Р(х, 政 ) 的 极 小 点 必须 满足 


ЭР o, = 
Эх, 70 
е 


因此 x,*e0, x.t КЪК), шт, HK AO 
增加 到 oo 时 x, 的 最 优 信 从 无 约束 问题 的 解 移动 到 约束 何 
题 的 解 ， 


4 = 

= бл b- c 
o 
co 
tà 
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WE 8-1 Вся, ЕНИ  —4- х, 值 都 对 应 于 一 个 问题 的 
解 ， 应 该 注意 到 ， 当 K 增加 时 ， 解 向 边界 移动 的 规 律 旦 现 


了 很 强 的 非 线 性 ，。 


无 约束 最 小 СА = фр 


图 8-1 


对 于 例 8-1， 我 们 能 够 求 得 最 优 解 关于 K 的 解析 表达 
式 , 但 容 一 般 情 况 下 ,并 不 能 做 到 这 一 点 ， 旺 时 给 出 一 组 参数 
EK и x 进行 直接 搜索 才能 确定 PCX,K) 的 极 小 点 ， 
对 于 给 定 的 一 组 约束 。 要 估计 解 对 于 参数 K 变化 前 敏感 的 
度 ， 需 要 选 几 个 K 值 的 序列 进行 试 算 。 

为 把 上 述 方法 用 于 不 等 式 约束 问题 

minf(x) 
Hd g (х)0, $—1,2,-,r 
我 们 定义 新 的 目标 函数 | 
Р(х, K)=fO0+ EK La Ти, (g) 
其 中 | у 
* 220 = 


0, 3 g, QOO Hf 
(= (|, x s mon 
ifj K—0 ИА Me 当 % 位 于 可 行 域 之 内 
时 ， 不 考虑 相应 的 约束 ， 当 x 位 于 可 行 域 之 外 时 ， 把 相应 的 
约束 做 为 等 式 约束 处 理 。 象 前 边 一 样 Р АДЕ ИН, ЭТР 
ЕНШ К Р(х, DERA, 
Ж XP RE ERES] Lagrange Ж 


Ци, =) + Уло.) 


£t 

зан POGKO m L(,3) 2 BB] EE RUE SUE ЕЕ, . 

® 
A= K 9. (Xu (gi) 

则 有 | . 
P(x;K)=L(x ,À) | 

而 号 可 以 证 明 (CBeltrami, 1970) ‚БК, EB Too вх [Ну 

Вау g (x)=0 FF, Я 

Bm 2K (2, 602, (ос) Ае" 


IN 7j (70 ift ETE EAE PRSE (x)u (ос )220, ИА 
At Dim ELS GO Со: )220 


BR Lagrange RCT Br SORTA (2 8-3) 因为 这 类 
惩罚 函数 产生 的 点 列 是 从 不 可 行 域 收 策 到 约束 问题 的 解 ， 所 
UESTRE. 

EREE, 的 分 析 可 知 ， 即 使 不满 是 约 束 规格 (也 就 
是 说 即使 在 XxX* 寻 入 * 不 存在 )， 这 个 悉 昼 函数 法 仍 能 政 率 到 最 
Ки, ми ЕХЕ ЈА, назва 
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Е, ПЖ, АРГО, УМЕЛ 
法 得 到 的 是 一 个 点 烈 (x! ха, e, KI, K2.... ERES Коо 
时 做 为 极限 收 化 到 Cx A) 
gi 3-2 
max x, 
县 使 91(х) = (x,— 2) (,— i)? zo 
ga(X) = (2—9) (x1 — 1)* c0 
ga(X)—x,20, g (x)==x,;2>0 
[B] 在 后 题 4-9 中 曾 用 长 nhn-Tucker 理 论 研 究 过 这 个 
问题 ， 我 们 发 现在 最 优点 x= = РАЯ, 
ЗЕРЕН А RAAR, 5 


Р(х; K)=—x(+K,[(%; —2)+ (1 — 1)? T*n1(21) 
4 EQ) G—1)?]*21(291) 
+K,x1s (03) EE xin Cga) 


= 


О 


—1i)a(gi)-FeK,[(2—7x xı) ,—1)!] 
Gn 7 Dis (оз) +2 mina (a) 
=0 (8.1) 
=2K [G5 2) (3, Cg) | 
—2K,[(2—x4,)4 G5 — 1)? ha (g+) 
十 2 (48,91) 
к=) (8.2) 
对 于 第 一 象 跟 内 可 行 域外 部 的 任意 点 来 说 ， 
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25. 


91091) —5u(g3) 71, #3(9з)=8.(9:)=0 
ВК,=К,.= К, EBDA aris 
AK (x,—2)—0 
或 х,*=<=2 
иШ (g. sulis 
12K(x,— Г)" =] 
EE (а) up? 
所 以 x,*-— 
нр р аСт, 2)7 88 E JIR BL, ЖЕР ЖИ ЕЕ 
ВАША. 

Аз НОЕ А ЕЕ М, ЖШШЕ 
Аа, Zik инн ОГВ А, DU 8-3 RATEN 
ЕЕ a 

例 8-3 求 点 * 到 原点 的 距离 的 极 小 。x 满足 约束 

gi) mà. +x;—1=0 
(хх, x,—2—0 
[ 解 」 显然 任何 一 点 部 不 能 同时 满足 上 述 两 个 约束 ， 因 


沉 此 问题 无 解 ， 然 而 如 果 我 们 不 管 这 一 ЖЕЗЛ TER B 
法 求解 的 话 ， 就 做 出 

P(x; K)exi xit Kn 21)?+ K(x tm) 
必要 条 件 为 

Ü 


геал, 42E (аа я, = 1)+2K (x, 4472) 2:0 


ӘР 


FM =2x, 2K (x (TX; —1)+2K(x, +x;—2)=0 
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* x F E(2xi F2zÍ—3)=0 
x R K(2x i +2х.—3)=0 


因此 
xt. 

Н 1 

хї= 1а ЗК $. 

1 т. 4 
"p ЖЕТЕ s PR IR ЛЕ Е f (0 78,0. 75) JA 图 8-2 容 
DAH, ЕЖЕЛИ. | 

K f(x) 和 e DO ZU ERR, НИЯ HA. ЙЧ, 

EAE PH SURE MARS TL SE ZR БИЛА, НЕ 
Е: dp FER Р(х; Kop BS, РАНЕ 6 C 
来 说 ， 上 述 结论 仍然 成 立 。 | 


二 、 甚 它 惩罚 函数 


ЖЕНЕН, KAHRI ERRA 
ЖИГЕР ЖЫ 8 Я М А AEN 
S224 +" 


绍 的 序 贯 无 约束 被 小 化 方法 4C5UMT) 是 一 个 典型 的 内 点 法 。 
专 虑 问题 
min f(x) 
В g.(x)m0, i—1, 2, ^r 
我 们 定义 新 的 目标 函数 


Р(х, K)-f(G)4k Y ay 


TRE К, 为 一 个 正 的 递减 序列 WETTRE POGE ,) 
BAR h x( р). КАНЕВ, 4 poo, K ,— 0b ,x( K ,)-x* 

现在 定义 

` R*-(x[ 9,00, £=1, 2, =, r} 
R={xl g (х)20, i=1, 2, =, rl 

并 上 且 讲 述 主 要 的 结果 [Piacco and МеСогичсЕ ,1963] 这 
个 定理 的 证 明 已 经 超出 了 本 书 的 范围 。 

定理 8-1 落 

(1) R° 是 非 空 的 ,: 

(2) fO) fie. GO i 52, , n) 是 二 次 可 微 的 凸 函数 ， 

(3) 对 每 个 有 限 信 В, (xL 00x65; ERRAR Ж, 
В. 

(4) ЧЕЛК>о, Р(х, ЮР, 
3j 

(хрр K,>0, в Р(х, Е, R° PTT 
极 小 点 xOC,Q eR, CAE 

VPK); K,)=0 
(2) lim P(x(K,, K,)=min f(x) 


因此 在 一 定 条 件 下 ， 求 Р(х. X) ngon J UU ЕЕ Бе 
= 225 • 


EIL SE. ХЕ Г ЯР. 

1. GXEROx(K.)-—x?* Е R'(BIP^J&Hhze ard FR 8 В BJ 
BO, НИ К,>0, E р=1, 

2. МХК, ЖРО, КУКЛА, 5 
х(А р). 

3. AMERRE IEEE, 

4. Шс 计算 


K,. 
Към = 


jg pni, НО, 

在 第 2 步 中 可 以 使 用 任何 一 个 能 求 极 小 点 的 算法 ( 例 HI 
第 六 章 介绍 的 梯度 算法 )。 第 2 Hop am К p SERES OE 
则 已 在 第 六 章 给 出 ,可 用 于 第 з 步 的 一 个 最 终 收敛 准则 是 , 当 

minP(x, K,)— minP(x, Кр) 
У OT HERES p 的 迭代 过 程 包含 着 求 Р(х, Куу. 
萝 内 选 代 。 对 第 2 步 的 这 个 内 选 代 过 程 家 于 采用 较 松 的 收 化 
W, PREK) 达到 相当 低 的 精度 就 停止 计算 ,从 计算 
角 关 来 说 ， 这 样 做 是 有 好 处 的 ， 其 原因 是 梯度 算法 后 期 的 先 
代 往 往 不 如 前 期 的 车 代 那样 有 效 。 

收敛 速度 强烈 地 依赖 于 Кү, c 的 信和 (К), dmn 
RK, BEKA, Ираклия. (Н 
КОМЕК, ВАКа, EE 
ЖЖ, УЕ РАН, ИЗ ЛАМА вЫ 
ДК, 的 值 (参看 问题 8-7 818-8). 

例 8-4 HSUMT 方法 求解 问题 


min Honti) а: 


+ 226 = 


HË gi(X) m x,— 1220 
ga(x) 9 34250 


х, 


ч 
y n 
©? = 


ЕЕ " 


ww 
+ бир + луш f 


Я 3-3 
[8] А 8—3 可 以 看 出 ， 最 优 解 在 点 xs 一 [1，0]7 R. 
fate. Ë SUMT 方 法， 我 们 定义 


Р(х К) 3G en La E 
必要 条 件 是 
ӘР K 
ax UTD qm 
ðP E 
9,717 5.80 
这 两 个 方程 的 解 是 
n D ie VE 
(Куи K 
Rit 
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HN __ ч 
i*-lin | t+VE, УК] =[1, o7 

这 就 是 最 做 解 

例 8-5 P SUMT 算法 用 于 例 8-4 中 问题 时 的 迭代 
PE, OK 9, cn. 

[A] 因为 能 够 解析 地 求 出 例 8-4 的 解 ， 所 以 我 们 不 必 
利用 直接 航 小 化 算法 完成 这 此 迷 代 步 吏 ,而 可 借助 于 ЖСК») 
HERRER 


жк») =[ узник, Е, | 


ЖЗИ. ER 8-1 和 图 8-4 rh, 我 们 给 出 了 前 11 РАК 
Ж, 


В 2-4 


ЖААМИ, И RHET 


Р, K)-fG)—K Улад, б) 


421 
其 中 K 0, X8 ЖЕЕП ЕЁ. 
к 549. н 


Р Ер 1 (КР) Хз(Кр) 
1 8. 2. 3. 

2 4.5 1.7868 2.12 
a i 2.25 1.581 1.50 
4 1.125 1.439 1.05 
5 0.503 1.323 5.752 
8 | 0.282 1.223 6.503 
了 0.141 1.170 0.376 
R 6.071 1.120 0.257 
9 0.036 1 091 D. 190 
10 0.018 1,082 0.134 
1: 0.009 1.047 | 0.095 


Bi 8-6 Haa Ta cog BERG s 
min z,+2x, 
Hf gi) - —х1+х,220 
100 x20 
[№1] 目标 函数 是 
Р(х, K)-—x,-2x,— Kln(—21 -x,)— Kln(x,) 


АР Е. ËP к " _ 
- 2A x, = 
OX, ITT ix, 3 ? 
ЭР _„_ K =. 
дх2 2 — xi tx: ? 
解 这 两 个 方程 得 | 
s OD (- 1+ /1+16E) ^ (8.8) 


| nOD (Ку ++K (8.4) 
于 是 有 
* 229 > 


E 3-5 
= теа, CE), x, (X) №0, 0]7 


如 图 8-5 "3. "CREBRIS. 
CENE АНК ПАЗОНРЯ 8-6 УИ. Hz 
K154, c—2, 
(№) (8.3), (8.0 PRU EDS IRURE БЕ 8-2 


和 图 8-5 中 给 出 。 8—2 
Р Kp X Ə (Ky) X: (K) 
АО l 

1 4. 0.885 2.181 
2 2. 0.595 1.350 
3 1, 0.891 3.053 
4 0,5 | 0,315 0.390 
5 0.25 9.155 | 0.149 
6 0.126 0.060 2.071 
T 0.683 0.057 0.035 
8 0.032 0.629 0.017 
9 0.016 0.018 0.008 
10 0.008 0.008 9.094 
11 9.004 0.003 | 0.902 


8 


习题 与 题解 


8-1 ЕТЕК Сл(х)у) “求解 问题 
min 21-252 
НАЁ g(x)21—x,—x4«0 
LE] таж 
Р(х; K)exi42xid Elti x) ulg) 

WR u(g)—0, 无 约束 的 解 是 (0,0)， 它 不 是 可 行 点 ; МЕ 
a{0) 二 1。 于 是 必要 条 件 是 
ЗЕ =2а,-20(1- ху 5)==0 


iE =4x ;-2K-— X,—X4)20 


地 时 有 т=з U ú . И NE 
"n y t - .® 
Br ху *=lim ` im; ср = 
"n 


8-2 ЕАН 
. min x14- xš 
яж g(x)exi—(xi—1)'—0 ` 
试 说 明 即 使 不 存在 最 优 的 Lagrange ROO, 26 YU Bš Ж 
K[g(x)]2 95 8EZE (9. E SR T6] b К E PIRE, 
[R] 观察 图 8-6 可 知 ， 最 优 解 在 点 (1，0)， 在 第 三 章 
TRH MRE, OARA Jacobi ER 为 1， 
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才 存 在 Lagrange #7, 但 
Val, оо" 


2х. 


其 秩 是 0， 所 以 不 存在 最 优 的 Lagrange RF. 


T (x 710 


ETE 


RENESTE, Bids n 
Р(х, Юта аге ou) 
必要 条 件 是 
ен, eK GS D E (s 70? j=° 


i 2x; 4Éx, |z 1—(x,—1)! |+ 


把 这 两 个 方程 改写 成 
ион 
[i-e 701]- -- 
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Н Е -оо ИМ, RIERA 
гуй 1, Xx;—0 
xe E] LPS LUC E... 
‚8-3 2619 
. min x1-xi f : 
HE Cog), n —620 
© g (X)=x 20 E 7 
gi (X) 934,720 
с |*= Dm 2K g, (Xa (9) 


[81° Lagrange "e; 


Lx, À)=x1i+ai+A (Sz i 231— авй зла 2 


Kuhn-Tucker 4 £EJj 


2 =, 3A hi =o 
22 —2x,-L2Ài 十 hg 三 0 
2E =3x 2х. — 86220 
дЕ = ðL u 
Ai(3x; 2x, —6)=0 
Ах: ==0, Аз. =0 


满足 这 些 条 件 的 最 优 的 (x， 入 ) 值 为 
„_Г18 121] гв г 
«= s. 4] 

{ФЕ ИЙЕТ] ЖУК, НР 

P(xK)exitxbb Е (3х, +22, —6)* и: (1) 


= 233» 


+ К„хїп,(0,)+ X. xi (04) 
对 于 在 第 一 象限 内 划 在 可 行 域 之 外 的 4 uU 


u;(gilol. rn I(2;.)=wus(gs)=0 
ex Im d aet E 
AP арх, SK Qs 2:6) =0 
ӘР мэж, АЖ (ая, ая во 


和 解 这 两 个 方程 ,我 们 得 到 


mme nC түшү. 


этих" ии (s ato, iG )- lis, A] 


H2K o, (2 [3 (ирк) ый; )- e] 


24, BED 
2+26К\ 
于 是 | D 
Ана) 
这 就 是 所 要 证 明 的 。 . 
8-4 MENER КОСК) ЖАО 
min x 
RAE 0х1 
[ 解 ] 首先 把 问题 改写 为 
min x 
Ві x20, 1—xz0 


AERE 8 Е 
2.1 Кі К 
Р(х: К)=я+ ТЕ 
其 必要 条 件 为 


ЭР n К К _ 
ox a НЕ 0 


由 此 可 得 | 
` xi(1—2x)? A 

i-a А ` 

К 趋 于 零 意味 着 或 者 如 一 0， 或 者 wa 一 1 分 别 对 应 于 约 帘 
极 小 点 和 极 大 点 )， 为 了 从 中 找 击 真正 前 解 ， 我 们 考 赛 在 每 
一 点 附近 于 МЕ, ХР =e, 


WX ale, Вехи, | E 


—в}?р? 
KU <0 


因为 我 们 要 求 Ко, MURARE x0 处 ， 
8-5 АЖЕК 19(x) 数 求解 问题 
| min x—1 
А #0 
ЖК, =1, с=10, 对 р=1,2,3 Xii Р(х; К.) 的 图 象 。 
[IN] ETARE 
Р(х, К)=х-1- Е /х 


必要 条 件 是 
ӨР 
Xx ! PLE 


я x=+. £ 


+ 285 = 


Аим K0mBAxQEyWG. 我 们 在 此 式 中 取 正 号 。 


P (£, K,y = xit 


Bist С 
лет R =0 

在 图 8-7 中 刘 出 了 当下 二 1,0.,1 和 0.01 НЯНЯ, 
请 注意 ,无 约束 且 标 函数 相当 于 一 个 严格 地 在 可 行 城内 部 上 
НН. 当 K 值 减 小 时 ， 这 个 曲面 是 不 断 变 化 的 ， 其 极 小 
点 最 终 收 敲 到 约束 问题 的 解 ， | | 

8-6 БАЖ f(x) 在 x" ЈАЧА УЯЛМА = № — 
个 估 值 是 - 

УМН’ YHOU VIO") 

AX HO) Hesse EH, ЗЕЯ & K /gOO. 30 W 
Хотин, АШ БИИ E Ki. 

[%] 设 且 标 函数 是 

P(x° ,K,)=f(x%°)+K p(x*) 


其 中 po Y à 


tel 
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于 是 对 于 PCIE )8] Hesse 矩阵 为 
Н, (x*) FE, Hy (xy 
ЕН. (х) Н, (х) 分 别 为 fo 和 p(x?) B) Hesse 55 
№, ЕВГ обхо) KERIEL. MERE T Je Rp КАЈ 
束 边界 处 的 值 时 ， 就 得 到 {在 对 应 元 素 相 比较 的 意义 下 》 
FL, (x°) 2Hi(x?) 
路 去 Hi(x*)， 我 们 选取 使 得 
[Vf (хо K VpQ)I* [ K,H,(x%)] "1 [V f б") 


T ÉQV p(x*)] 
KEMER Ki EUH 


K = VIO) HI OOVA?) 
"УРОН Сх р(х) 


87 WWE Куох) At К, 的 方法 。 
[№] Во Р(х, К у=, 所 以 选择 长 的 
一 个 方法 是 使 得 WY POCHE BRAUN, ЕВ 


IV PG; КОН SV Pot IG) УР, E )1 
S ai. [Ухо УР) vro» 
+kK,7PG0) |=0 


* 


_ 1 
其 中 | p(x?)= Qao» ' 
И _ Утро) 
因此 CD 7 
当 x% 让 接近 于 所 有 的 约 束 边界 时 ,这 样 信 出 的 K, ЖАН 
s. | , 


. 2315 


7 xm 


| 8-8 БЛА K [g(x)] ?求解 问题 
min 35,44% 
В #120 
8-9 ТХЕ, (g, (x) PIA TEES BOR REIS] E 
min (x4—1)* + (x, —2)? 


Hf Хах: =1 
х,+х,<2 

8-10 考虑 间 题 
min x, 


А — g1007(—2)-G—x)t*x9 
ои) 00а) GT 


R ЗО BIB Е RR RA, ENERE 
也 能 得 到 最 优 解 。 | 

8-11 导出 一 个 着 用 手 民 趋 子 1 s ice d TIR UG + 
РЕЖ 8-4, 

8-12 НЕНИЯ К/а(х) 求解 问题 8-8. 

8-18. RAEHAN К аху 8-9. 

8-4 i HE TTE SUE Сх) ИДЫ 8-10, 

8-15 EDITIIJTOLS 8-8. 

8-16 试用 惩罚 函数 ingfx) 求 解 问题 8-9， 

8—7 RAER lng《x) 求 解 问题 8-10。 
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第 九 章 ”二 次 收敛 的 极 小 化 算法 


ЖИЛИН У, H 
Í(x) аЬ E . 1805 паху) ——mia 
L.f0()1, ЖА, НИЖЕ ЛИ 
题 .如 果 一 个 算法 产生 的 点 列 * xt xti. (т) 
之 f(x?).…， 我 们 就 称 该 算法 为 下 降 法 ,在 第 六 章 中 已 经 如 到 
过 一 个 求 航 不 的 下 除法 的 例 于 ， 即 所 谓 的 最 速 下 降 法 或 榜 度 
舞 法 。 总 然 ， 如 果 紧 等 找 函 数 的 极 小 点 ， 我 们 应 该 使 用 这 样 
的 算 淡 ， 它 从 一 次 选 代 到 下 次 欠 代 不 会 使 函数 值 增加 。 下 降 
法 正 是 满足 这 一 要 求 和 的 算法 ， | 

各 个 下 降 法 就 其 收敛 速率 而 言 是 各 不 相同 的 。 下 降 法 的 
收 敏 速率 用 比值 laf (х) о Get 1) 8 ATEAN N 
BRRR Кр LP 表示 所 进行 的 选 代 次 数 .这 一 极限 值 称 
为 算法 收 笋 的 聊 . 最 优 赚 度 算法 收敛 的 阶 是 1 .我 们 说 收敛 的 
防 是 2 的 下 降 法 具有 二 阶 的 收敛 速率 ， 然 而 不 论 其 阶 和 如何， 
绝 大 多 数 下 隐 法 都 不 能 在 有 限 步 内 求 出 函数 的 极 小 点 ( 参看 
例 6-4)。 即 使 当 目标 函数 是 二 次 函数 竺 也 是 如 此 。 然 而 本 坦 
介绍 的 方法 能 够 在 有 限 步 内 求 出 正定 二 次 函数 的 极 小 点 。 

刚才 我 们 引入 了 收 敏 的 院 的 概念 ， 用 来 族 淆 描述 下 降 法 
收 人 第 性 态 的 一 个 标准 。 还 可 以 操 出 另外 一 个 标准 ， 即 如 果 一 
个 算法 能 在 有 限 步 内 找到 正定 二 次 函数 的 极 小 点 ， 我 们 就 认 
为 该 算 法 是 优良 的 。 当 然 这 个 标准 并 不 能 揭 杀 把 该 算法 用 于 
一 般 卓 棕 函 数 时 的 执行 情况 部 何 。 然 而 因为 一 个 连续 可 微 的 
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二 次 函数 在 其 极 小 点 酝 近 ,总 能 用 二 次 TayIor 开 式 近似 ， 
Et LRL SE BEER ВЕНЕВ Ал, РЯ 
一 般 的 函数 来 说 ， 也 会 很 块 地 收 货 到 它 的 被 小 点 ， 如 果 一 个 
算法 经 有 限 次 迷 代 就 能 来 出 正定 二 次 函 教 的 极 小 点 ， 我 们 就 
称 这 个 算法 是 二 次 收 笋 的 。 


一 、 二 次 函数 
所 谓 如 "目的 一 个 二 次 函数 是 指 


- * 1 я = 
Кен, = а) Y bb Y, Y tnn 
tel 4-71 i=l 


i . (9.1) 
Вс, 5,810, , BUR ACIES RE JH E Р ИПИНЕ 
(9.1) ES Я 


fO =c+b!x+ qu, (9.2) 


ЖБ, =. 0,1, A=[a, 4] E— + nxn Я. ЖА 
一 般 性 ， 可 以 假定 上 是 对 称 和 矩阵 。 若 丰 是 正定 的 ， 则 我 们 称 【 
9.2) 式 给 出 的 1(X) 是 一 个 正定 二 次 库 数 ， 
991 考虑 两 个 变量 的 二 次 函数 
JEsi’ 55) = В+ dz, +ex,+cxË+bx х, фах? 
| | (9.3) 
Ruhe, b, с, d, eXt& EROR ШЗ. ЖЩ f(x I, z,)2B 
正定 的 条 件 , .并 确定 其 等 值 线 的 形状 、 
IM) 用 向 量 ~ 和 矩阵 符号 ,我们 可 把 (9.3) 式 改写 成 


f0) =k+[d, a 1. 


‚240. 


. с 28 b x, BENE 
++ 09%) P 2c 12] | (9.4) 
3k AREA HUE AR HH | О 
гда b 
A= р M 
3640, coH4ac—b*2»0, M| Sylvester STAA Ж 
Е. НИЕ Xf(x,, НЕ, 40с-5 是 
二 次 函数 (9.3) 式 的 判别 式 。 若 判别 式 取 正 值 ， 则 f(x1, а) 
=&ЮЖ ДЕЕ 中 的 图 象 是 一 个 炸 阅 。 所 以 f(x, x.) 的 等 
АН Е W dt RAE, 
#9-2 ЖЕ (9.3) 式 给 出 的 二 次 七 数 ， 设 а= 
=}, е=—1, 5 二 0，e 一 2。 男 出 其 等 值 线 ， 
UN) 用 配方 法 可 得 . 
fii 2 一 1 十 X1 一 X2 +91241 


Ene (ni) 
Bi Абл, ха) 一刀 常 数 ) 是 一 个 以 x 一 一 十， aml 
为 中 心 的 禄 加 (参看 图 9-1)， 还 应 注意 到 ft 50) m, 
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Rf(—. —)=- fons.) ЖАШЫ ЫЙ 


中 心 达到 其 极 小 值 。 
9-5 Зена.) ники, ЕН 
57 
VICO) = Ax 4-b (9,5) 
[BE] 为 得 到 f(x) ВЯ дГ/дхь, h=1, +, m. 
Sue EAB—TG.DGUBAAÁBGXHR. C 


forma) 一 0 十 zb 
+ |= zo Xd Z Ухуд, ух | : 
га "s 0a T & 10633 
=c-F > bix; + [eost zd. 
ta gusa +E Eses. | 
2. 4. 
А Ч Са, 一 0j +)， 上 述 方程 可 变 为 
Рунь а) с Eb 
t: "TS PIE PET: 
2 25-й | Mr kiti 
+E mS ] 
jmt - 


由 此 我 们 得 到 


97 . 1 
x, =һ+-| Фазь®у--2 m LITE ] 
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=6,+ Zait 


这 就 是 我 们 所 要 的 结果 。 

#19-4 ИЖЕ 次 函数 在 X*= Аз 处 达到 其 只 一 
МЕ. 

Г] но. Ds E OO 是 二 次 连续 可 微 
的 通 数 。 因 此 它 在 由 x==0 结 出 的 驻 点 站 一 达到 其 极 值 ， 
ЖАН, HARIA 520, (9.5) 式 订 推 知 驻 点 上 只 有 二 
+: x* 一 一 和 ~!b。f(x) 的 Hesse MERA, 按照 假设 条 件 它 
REE AE COE =- АНЬ В E 

s- вотна ак, RP 9-4 кине 
求 出 其 极 小 点 。 : 

[M] З-на, ОВНА ЛИ чека 
达 式 ， 可 得 
. -fa 0 
Ae É Jo 


E я `. ` Н 
а UI 7 ч. . -r 

m . z. |o 2014 
Ае} ot > 
; Jue Lj. у у 
-t 4 - um 


зерзаты а, —:)*, FERA 9-4 的 结果 ， 我 们 得 到 
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мез 


IERA 9-2 rn grito Foo х) х= — 
ЗЕ EA. 


s= 


=. ЕЕ 


ET Fiv v 是 Fa 中 的 两 个 向 是 ， 我 们 曾经 说 过 ， Ш m E 
FIRE BUR (итү = (и, 二 中; 就 称 它们 是 互相 正 灾 
H. Жан, 我们 将 常常 使 用 记号 Cu VATAN. 假设 
有 一 个 xn 正定 对 称 短 降 和 ,如果 u 和 Ay ЖЇН EiEZE RS (Hi 
3i3uTAv- (и; Av) =0), ЖЕНИЯ u 和， 关于 六 相互 
Je, ПАУТИНЕ, ПЕНТАН 
EXE. FU SLIESE RME НЕН ERE 
个 特殊 博 形 ， 

ША ХЕ, ЖЫ холо Ах Ax, ША EA 
的 一 个 特征 值 ， 称 x 为 神 应 的 特征 淘 量 .根据 线性 代数 的 知 
Я, 我 们 知道 ， ЖАЖЕ ЫЙ ЕНЕ, Axiy E A pP 
征 岗 基 ， 则 x 和 y 是 相互 正 交 的 ， 即 (x， 闻 =0®, н: (у, 
`Ах)==(у, Ax)—-A(y, = 二 0， 因 此 可 以 说 ， 正 定 算 隆庆 的 各 
КИЕН АЗИ ЕНН, ВРА ЛЕНЕ 
ЕВЕ, РЕ РЕМО EMERGE, Я 
ЗРЕНИЕ ЛД, ПЕЛИ ЕТ 


Фщяту TURION МЕНЕ, LARREA 当 * 和 六 
ъй РИНЕ ЕНЕНЕ, Ни, ТОЖЕ Е 
Ait. АНН ЕН ЛЕНЕ, EAP T 3 ASE i S 
SEE HET Р. 
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FO AERON V CHER RR. Ала EU 中 的 一 
组 相互 共 轿 的 向 量 不 能 张 成 E”， 这 样 做 就 可 能 局 限 在 某 一 个 
不 包含 极 小 点 的 子 空间 上 搜索 . 在 下 例 中 ， Я 
плева, дина E" rH WES 629 IARE TE 
у 2135, ИШИНЕ КИЕ”, © 

#19-6 RAA- ERARE, об, (и, m) ЖЕ" 
НРА A ЖЕНИЯ, VS YE AJ C Ж BJ l Et 
xé En, х= Xeat, Жор a, (и, Ax)/(Quf Rut) , 

[证 ] зайде Хаи 满足 


аи о | 


£31 7 


Я [Y аш |= Yes 


1 


+, к>. Sk” 


Z (x Y= £ itk 
АТМ 


Ri 9-2 


БК, ЖЕ ARER RHEA 


(e Yon] }- аи mo. 


БЫН =1 


ORTAM, v^ESHS TEE JEU A ВВ UE 


Ru. 
‚ 245 < 


=a,(u*, Аи") = 0 


HTA ЖЕЕ Ни 0, (и, А) Z0, рана, = 
k=l, e. n, АТИ", isl, en) НЕХ 
E. "ABPEBOS E" 中 的 一 组 基 。 于 是 对 每 一 个 *€E Es, 7 
都 存在 着 叭 一 的 2 i=l, 56, n, EH 
X 一 a ut 
Ни АННУ, 可知 (uw, Ах) =<, (uf, 
Аи’), ба, = (ut, Ax)/(u!, Au*), 
ЕЖЕ, ИРАН e 1 RD E 

0 Л. 45, 设 x 是 "中 的 任 一 в, PAR v У. хп ЖИНИ 
38 考虑 1 的 函数 Gian), Еа 
BJA*., Ei9-228 IB T хм. y= R 
们 在 问题 6-7 中 曾 证 明 (Y，A 天 好) 一 0。 这 个 结论 称 为 最 估 
下 降 条 件 .在 下 节 中 我 们 将 使 用 这 一 术语 .。 


=. ARER TEH BRED 


现在 考察 在 求 极 小 的 下 降 算 法 中 使 用 共 轿 方 傈 的 好 处 ， 
这 方面 主要 的 结论 由 下 列 定型 给 出 

定理 9-1 ОВ ЛАКЕ НИНЕ 的 下 
ем, неси. 

证 明 : ЕН 5009.2) 0н, x" e En KRR 
Лха Ab itid ikut, m1. a. n Ж 
东 下 降 方 向 ,我们 假定 它们 是 关于 АНН ЕЗ. monat 
x! 表 示 x* 的 第 让 个 近似 点 ， 即 
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í 
x! x". y Apu" 
kal 
我 们 从 x' 出 发 ， 沿 方向 u1+! 称 动 步 长 441 IRSE хх 
УБА +10622, PAra А АННЕ № 
点 。 这 里 使 用 的 是 第 穴 章 曾 阐明 过 的 洛 旦 “寻求 局 部 极 相 点 
的 一 维 搜 索 。 从 最 优 下 降 条 件 我 们 有 


《二 (9.6) 


AAV f(x) ВИНА (9.5) ААТ jp RE КИИН ДЕ, JA 
《8.,6) 式 算出 的 最 优 值 和 1 :1 为 


ufti, Ак 
iam rer Rar (9.7) 


办 此 


LÀ 
x"== x" L Ула 


k=1 


=y — ` бив, Ax? rb) ий 
E (u*, Aut) 


в Vo (ut, Ахо) O, ` SV (и*,АГА-ЬТ) 
=x -5 (ыё, Aut) M TA, (ur, Aur) 7ч" 


=x? —x9 — A7 !b- А-1Ь-=ҳ* 
注意 这 里 在 导出 x** 和 A"!b 两 项 时 ,使 用 了 例 9-6 所 得 到 的 结 
iB. 
由 定型 9-1 "[n, АЯ X" Ш, SPD 8 
САН, ВЕК, НОННА 
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n#， 还 有 ,不 管 实际 使 用 u* 时 是 按 怎样 的 次 序 ， 都 可 得 到 二 
КЕ. 

9-7 考 虚 例 9-? 和 例 9-5 中 所 讨论 的 二 次 函数 Я 
定理 8-1 求 这 个 前 数 的 极 小 点 。 

[ 解 ] 由 人 鲍 9-5 我 们 有 


Жиз=[1, 0]", и=[0, 1]7, X 


e mati 909 


Еу" ти? 3 РАЗН JES DJ. Ri [o, 01 8632 
AXES. HOTAM =—1/2, А,=1/4, 于 是 有 


т 
колаш А-1, 24 =х* 


o., ЛЬ 


我 们 可 以 对 许多 众所周知 的 极 小 化 下 降 算 法 (如 第 六 章 
所 介绍 的 樟 度 算法 ) 进 行 修 改 ， 使 之 可 以 利用 下 降 的 共 $9 方 
向 。 为 实 统 这 一 点 ， 必 须 建 立 一 个 产生 共 厚 方向 指 方 法 .但 
是 在 计算 时 往往 只 有 函数 值 和 梯度 问 量 客 易 算 出 ， 所 以 要 使 
一 个 算法 方便 自行 ， 它 在 产生 相互 共 氏 的 下 降 方向 时 ， 就 应 
恋 只 使 用 这 些 量 。 特别 好， 在 产生 关于 第 隆 和 (二 阶 导 数 ) 相 
ЕЖЕ, TERRE А ЕВА, WEER 
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要 求 的 一 个 算法 是 Fletcher-Reeves 此 能 梯度 算法 。 这 种 算 
法 是 对 第 六 章 介绍 的 梯度 算法 的 一 个 修正 。 下 面 我 们 就 来 介 


绍 这 种 算法 。 

Itu ge ВЕ ЖОЕ 

1. Ex. Xe Х* 的 初始 近似 ,计算 YACx*) ， 并 定义 
v= iC), 


2. ЖЕ, +, nd 

(i) Ex =x БА, чі, ВА, ИА! 1) 
作为 4 的 阔 数 取 极 小 。 

(i) ИЯ). 

GH) Miam, EX 


vevo + нз qu) 


3. HARENA EH. НА" 0х, 3pÉEBISISE— 

为 开始 执行 这 个 算法 ， 我 们 可 以 采用 与 梯度 方法 相同 的 

方式 选取 初始 近似 加 。 再 者 ， 第 六 章 中 介绍 的 对 于 习 度 算法 

的 终止 准则 也 可 以 用 来 停止 造 代 。 在 梯度 方法 由 ， 我 们 是 从 

X! «RV! m УК ЖАН Парк Е. 在 共 固 
BEER, ПВ 


Iv/GP es 
УСО 
的 办 法 修正 了 梯度 方向 。 当 f(x) 是 正定 二 次 函数 时 ， 这 一 修 
IE SS vf(i—1, en) 是 一 组 相互 共 轿 的 向 量 。 症 问题 9-8 
中 丝 出 了 对 共 轿 梯度 算法 役 详 细 分 析 。 
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例 9-8 жшке REO =x Ax, Ru 


Dod 
A= f jj 

试用 Fletcher-Reeves 共 辆 梯度 法 求 这 一 函数 的 极 小 点 。 

[ 解 ] BERE fO Ra bL EE? h 8 ГО о T AE Е 
六 章 例 6-4 中 我 们 已 经 知道 ， 除 了 初始 点 怡 好 选 在 某 一 符 宗 
币 上 的 特殊 情形 外 ， 最 优 娣 度 法 是 不 能 在 育 限 次 选 代 内 找 出 
ЗЛУЕ ДУ, НРО) СКЫ, ЕСЕР 
ФАБ, AURTE Ж m3 АА xt=[10, 
—5]”, 

ХНУ) = Axs a я, m F28a И". НА 
НТ, RIEN == — V fais 017, 
FRX -HAv =[10-5А, —5]'. B. 


if Г JM 
0 0 二 一 一 一 EN | 
fx uu „=> |10 5А, 5 jl ә 


e E50 1544-504] 


а? f(x! Ам) 425020, ем LZ A 8 
ВХ, ЛЕА =0.75 АКА КЕЛИ, ТЕШЛЕ df(x?-FAv")/ 
dÀ-0, НИ! —x*-EA u*-[6.25, —5 7, V f(x!) 21.25, 
-—8.75j", 

HERODA SHAI V ED ЛУ, 6 
ll V Сх) 1 2=52--02==25, У (хт) 1 ==(1.25}2--(— 
3.75)22+15.55, РЕВ (9.9) AREY =— [1.25 
—3.15]*--(15.55/25)[ —5,0]* = [—4.36, 3.751", Ф101 


+ 280 * 


前 一 样 ， S AA C EAD) - (26.55—38.954--14.45 
А2), EdEMim 1.343521 82 ЛМ, 
于 是 我 们 有 xizx'-A,v!—[0.4,0.0117. 但 是 对 于 正 
定 二 次 型 来 说 , 共 辊 梯度 方法 最 多 # 步 就 龙 找 到 它 的 极 小 点 ， 
放 这 理 #=2， 所 以 从 理论 上 说 应 当 有 xX? 一 [0，0]”。 我 们 婚 
数值 结果 XxX? 一 [0,4，0.01]" 是 接近 于 [0，0]” 的 .其 阅 的 差别 
是 由 于 计算 中 舍 入 误差 的 影响 。 要 想得到 更 好 的 管 案 ， 我 们 
эх Кох”, Даня Га, | 

919-9 i f(x, х„)=хЇ-Е2хї, HUBER) 
> "Ax, 其 中 


НЕВЕ f(x ИЕЛ. MATAR x IN BU № 
X. | 

[№] ВС) ЛЕА ҖЕ, ЕБ ЕШТЕНЕ ИРЕ 
不 受 初 始点 的 影响 , РЕРИХ —[5,5]7, XB V JOY 
=Ax°=[2x?, 4xj]T-—[10, 20]*, НАЯ ВЕ 
一 步 , Ж v*— у f(x*)—[—10, —20]T, F x* -Av* = 
[5—104, 5—20A],. f(x*--Av9) = -1-(150—10004-4- 
180022), Bi3jgdf(x9--A1v95/d2*-180027-0, BREL f (x° + 
Av) А 00. 285b 3 Л XE DERE d (хе T AM0)/dA=02 
pimesx'-x'--434,v9-[2.2, —0.6]*, 

BTAXHWEI VIO!) =[4.4, —2.4Ё, IV filu 
5.4, У Ско)? 500, ВЕЯНИЯ, "D 


меко fin 
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—[4.4,—2.4] 4 955 E19, 29]* 


=[—4.9, 1.4]? 


НН: Ау: ={2.2-4.94, —0.6-1.44), Ух, Av! 
Ж ЛАША ОКИ ЛДА, RU 到 4,—0.44, ПИН 
хех! FA vi-[0.05, 0.15]7, SA SDE ES EE, Wr 以 
Их? хш ы САНА. 


HG. Ш—ЖЕЖ=Е+ЛУЛЫ 


ЖЕЕ, JPEETJE. AREARE 
Vf 了 (Xx) 。 由 于 YX) 的 每 一 个 分 量 差不多 和 f(x) 本 身 一 样 复 
杂 ， 所 以 每 次 选 代 就 相当 于 计算 f# 十 1 个 函数 值 ，PowelI 创 造 
了 另外 一 个 产生 共 斩 方向 的 方法 ， 它 是 借助 于 在 每 次 选 代 中 
进行 一 维 搜索 而 实现 的 [Powell，1964]。 荐 x!*! 是 从 xt 出 
发 沿 方 向 Y' 进 行 一 维 搜 索 得 到 的 局 部 极 小 点 ， 则 使 用 前 边 规 
EERE TERTI (v! V f(x* *1)) m0, Powell 方法 是 
建立 在 下 列 观察 结果 之 上 的 ( 参 盔 图 9-3):， AX mx? 是 沿 同 
一 方向 Y 但 其 不 同 基 点 出 发 进行 一 维 搜 索 而 得 到 前 两 个 点 ， 
ШЕ КН, МЕ хх Буни. M 
"HO AG) —x)) —G,(g*-9')) 20, Xx Bg'- VQ), 
i=1, 2, ETREX АПН ig RW 
方向 。 

Powell 工法 

Ж {у*, =i, o, 8} 是 瑟 " 中 给 定 的 一 组 线性 无 关 的 讽 
EH. HE Ex Кр А. Powell im FX S. 

Od. bel, 2, =s, н ЖЕСТ OUR А а 


. 2524 


х 


ОКЕ Ла, ЕХ 


i yiri i 
хіі AN 


2. 对 ?二 1，…，# 一 1 执行 用 Yf+! 代 赫 Y! 。 

3. Hix"—x' BV, 

4. ROH Q0 —x?) ) (ВАНО 达到 极 小 的 
Аһ, 3EFIX* HA (x" —x* I Ex? 

s. 若 终 止 准 则 未 满足 ， 则 转 1 。 

在 开始 执行 算法 时 ， 可 以 在 第 一 次 选 代 的 循环 由 用 佣 标 
HERAS i=1, =" п}, ЖЕНИЯ И 任何 一 个 终 
止 准 则 都 可 以 用 来 停止 本 算法 的 计算 。 

我 们 可 义 把 Poweli 算 法 看 做 是 一 锥 省 索 方法 前 改进 ,在 
一 维 搜 索 方法 中 ， 每 次 只 变动 一 个 变量 而 求 得 给 定 遂 数 〔《 对 
这 个 变量 ) 的 一 个 局 部 极 小 点 。 这 等 价 于 沿 E" 中 的 坐标 方向 
进行 一 系列 的 一 维 搜 索 。Powell 的 改进 在 于 引进 相互 共生 
的 搜索 方 问 ， 用 以 代替 坐标 方向 。 
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919-10 Ах, хо) НАА ІЕЕ КИК, Е 
ПН Их 9-4), d E ARA х 
ии УВЕ 9-4 中 给 出 ， 试 用 作 图 法 说 明 
Роме ИЕ Hi T f(xi, ЗН, 

[E81 我 们 进行 一 维 搜索 ， 求 得 从 x 出 发 沿 方向 Y 的 局 
пля. МУ (а, кН М ,所 以 极 小 总 在 X 过 
到 ， 这 里 线段 六 一 X1 525 IV ER, 

Ax! Hi, АЛИ на, ， 和 前 边 一 
畔 ,可 知 这 次 是 在 点 X* 处 达到 局 部 极 小 。 按 照 Powell 算法 ， 
Жуу, Ди =х2 AEN? 

Ax' HE, ПЗ, Нарх? Powell 
算法 ， 我 们 从 хещ v* 进行 一 维 搜 索 。 这 次 终 正 于 
xt, AEREA ERREA., EE 9-4 НГ. 


ь 254 + 


Hi, А В Жи 进行 一 维 搜索 而 得 到 的 
点 ， 因 此， 按照 我 们 前 面前 观察 结论 知道 u'-x'—-x* 和 
иди, Роме! Wik ARIES, 
Ни, 

HERE TAAIE ВАЛ jul. и, ДНИ 
ии ЛУЧ x*, Tasia xt 看 dcin 
点 ， 那 么 我 们 已 经 沿 и! 进行 一 维 搜索 而 达到 了 x°. ВЕ 
хи ТК ВЕТА КЕ 

{19-11 Яонин ERE (х), у! = 
Еа, Е, =, И, Ax*—[20,20]7 B 5—8 
的 Powell 方 法 ， 稻 明 进 行商 次 选 代 的 过 程 。 

[和 解 ] 遵照 Poweli 方 法 ， 我 们 构造 x 十 1vI 一 [20 十 和 
20—A]T364E OaE -1-2400—804 821] . E 
d? f(x! НАУ) аА == 070, ЖАН (xt -- ДУГЕ A = 
6.66 达到 级 小 ， 在 此 处 а(х АУТ) ЛА 0, р хі 
ХАУ: =[26.66, 13.34]7, 其 余 的 一 维 搜索 可 依 类 似 的 方 
式 进行 ， 现 把 所 得 结果 总 结 如 下 : 

A= —11.8, хіх Азу? :=[8188, —4.4617 

y! —x* —x?—[—11.14,—24.46]" 

Аз == —0.15, x*-x'-FA,u!—[10.48, —0.92 

А.=—3.46: X'ex9*-FA,v*—[7.02, --4.18]* 

457 —0.18, X*—x'-FA,u!'-[8.88, —0.84]" 

u? —x*—x*-—[—1.8, 0.2217 


НЕЮ РИН xA. 


2 0Y—1.8^ 
(ut, Au*)a[ —11.14, 21.481 | | =з 
у = 0 4 0.28 | 
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HA (ut Au*)x0, Ети! пи? TRAFA. ХЕ 
НА ЛЕНЕ ЖЕТ БИП x" ru? 进行 一 维 搜索 
得 хб =х° Ави? =[0.03, 0.717, ER 1 М хе 
[0,0]7。 这 一 误 益 还 是 由 计算 误 莽 所 造成 ， 贾 达到 更 高 的 精 
EE, Ах НХ, АРИЯ ЕЖЕ, 


共 扬 方向 算法 比 最 优 步 长 的 梯度 算法 好 ， 它 的 好 处 是 在 
ЖК АЙИСЕНА. SU) GE DUX EXT EC X 
那么 (如 图 9-5 所 示 ) 因 为 V обе 3 EE, ВСЕ 
沿 x* 一 x? ЖСШМ Ухо) Ж) 收 化 得 更 快 ， 另 一 类 二 


3-5 
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uc S RETE A Zuge RUK E. ZEB ERE DOSE Biete 
困难 ; вашу у(х) ехе хе, REAA 附近 用 
一 系列 二 次 函数 近似 (0 而 实现 的 。 

例 9-12 设 ft) 是 二 次 连续 可 微机 数 ， 其 全 局 极 小 点 海 
x*, ROE B ТЛИ, TASSE V f(x?) 
рхо хи. 

LEE] ТЕх* Шр ОЧ Е ERE V f(x), Ш—Ё 
Ta7ylor 级 数 屋 开 式 ， 我 们 近似 地 有 


V f(xt)= V fa) HG) (к?) (9.9) 


ARH E f(x) х) Hesse Б} ,„ БОЕ Xx SRI 
极 小 ,所 以 Y f(x*) o EH QC) IE E IKTAR HO) 30,0 
这 样 就 可 以 把 49.9) 式 改写 为 

x9 --x* H(x*)7! V f(x’). 
或 者 等 价 地 
` х*=х%—Н(х*®)-1у f(x?) (9.10) 

著作) 是 由 (9.2) Анис, MUH(GX)= A, 等 

式 (9.10) 就 变 为 

х®=х°%—А-ї\/ f(x’) (9.11) 
Hh У f(x!) = Ахо рь, x*——A7!b, (0.11), W 
ЕК, ИМЕЯ, TARR., Ш 
只 是 沿 着 经 过 修正 的 梯度 方向 一 ALV (x) 取 ~ 一 个 单位 的 步 
长 ,就 能 达到 六 一 一 AIp。 等 式 (9.1 的 有 着 类 似 的 信义 。 然 而 
因为 (9.10) 式 使 用 了 VY 了 (XW) 的 近似 Taylor 级 数 展开 ,所 以 它 


站 根 据 x* 为 我 小 ， 只 能 得 到 H(x*) 半 正定 ，[H(x*)B0， 这 里 的 讨 沦 应 № 
— PË |H(x*)| Щи. 
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BLUE ESL КЛАНОВ 5х 6 Ву 
法 ， 它 使 用 一 PY 了 f(x) 形式 的 经 过 修正 的 实 度 方向 , 这 里 PP 是 
ЛЕ, в, ПНА E EY P 为 (x) 的 
Hesse ау, ` 

然而 实际 上 当 常 出 更 的 情形 是 ，jx) 的 Hesse 矩阵 或 者 
根本 无 法 求 出 ,或 者 计算 量 很 大 。 而 НЕ EXT Fx n 
ЖЕ МЕРУ НЕБА, БАР nt ИЕ ОШ, Br 以 
3 Жн} 8E ДЕА foL BA] RAAK ТЛВ 
一 个 近似 于 村 (的 矩阵 出 发 ,然后 每 次 选 代 时 对 它 进行 修 
E. Ж, М(х, Ах) 做 为 号 "中 的 模 或 尺度 ( 焉 离 ， 
度量 ) 时 ,和 -1V Fo 是 由 (9.2) 式 给 出 的 二 次 函数 f(x) дф 
度 . 当 了 (X) 不 是 二 次 前 数 时 ,H(x)"*Y 了 C(x) 有 着 类 似 的 含义 . 因 
嘻 这 类 经 过 修正 的 梯度 算法 可 以 认为 是 在 Efe T EE E 
以 后 竟 梯 度 算 法 。 因 为 我 们 一 次 又 一 次 地 计算 H(x) 1 ,所 以 
这 样 的 算法 称 为 变 尺 度 算 法 。 由 Tletcher，Powell 和 Dari 一 
dot 创 造 的 方法 是 这 类 算法 中 的 一 个 重要 算法 [ 参 君 Bletch- 
her and Powell, 1963; Davidon, 1959], 

Fietcher-Powell АЯ 

dx RH MILES IX HesseJt PERI DE 
的 近似 。 为 书写 方便 ， 我 们 记 g+ = VQ). Fletcher-Po- 
weil 算 法 由 下 列 四 步 组 成 : 

1. 选择 Xo 和 Ho。 

2. 对 ?二 0，1，， 8 一 1 EX tH =x av’, RP 
vy! 2 Н‘, ПАЯ МОК pos, 

3. Wi=0, 1, en n=l, @ut=A vi, y sgi — 


g'. REX 


H,,i=H,+AÁA, ЕВ; (9.12) 
‚258. 


其 中 
= мш)" p= Ht (ume 
(uy. (y*)'H,y 

4. 车 尚未 满足 终止 准则 ， 则 令 x0 一 x"， 然 后 转 ?。 

可 以 从 ET BIOS x ЕЛЕ. ЕДЫ 
介绍 了 选择 一 个 合适 的 初始 点 的 方法 。 我 们 可 以 用 任何 一 个 
ЕО КЕН КЫ Hesse НЕНИЯ. Я 
RTI Е ЕР ЖЕН ОЕШ. Я АННА 
hg £x 1E 2E ITUA ЕШ ЕЗЕК ДЕШ. 为 了 减少 计算 中 
合 人 误差 的 影响 ， 一 个 很 好 的 办 法 是 , 每 进行 8 次 选 代 后 就 丢 
ЎН, ,用 一 个 新 的 近似 重新 开始 .Fletcher 和 Powell 已 用 数 
ВУ, ан GM 
又 优 于 前 面 介绍 的 Poweli ЖЖ, ЕЯ, ИК, 

ЮН АРЕ, fEXIF Om Hesse ЖЕНИ, ине 
第 六 章 中 所 讲述 的 那样 ， 对 天 x*) 报 合 一 个 二 次 曲面 。 关 于 这 
一 算法 的 进一步 的 讨论 可 在 问题 9-5 和 9-6 中 找到 。 


例 9-13 考虑 正定 二 次 型 fx) 一 -3 x Ax, Hih 


3 一 上 
A= B 1 ] 
试用 Fletcher-Powell 变 尺度 管 法 求 其 极 小 点 ， 
[8] 我 们 任 选 x* 二 [10，10]" 做 为 极 小 点 的 初始 估计 ， 
Неѕѕе ENAH AHRR CRURA EATE 
TARERE, 7925 ЫЛ. W 


1 O 
Ho= | 
° lo 1 
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ВТЕ У (х) = Ах [37 —х,, —2,0:2,)7. E £HEx Я 
SIRA RITE V f(x) [20, 017. 38 RFletcher-Powell 
算法 的 第 2 jp, ЖЧ 6=—H.V F(x*) ——[20, 0)”, HBA 
x0? 十 4v0 一 [10 一 204，10]J7。 因 此 


Jc лче) = 710—204, 101 И EM 


10—204 
Uo) 
==100—4004- 60041 
它 在 一 0.33 处 达 测 关于 % 的 极 小 值 ， 故 有 x! x FAS 
[3.34, 101", 
3i Eq Fletcher-Powell 算法 的 第 3 步 ， 我 们 计算 
V f(x')-—[0.02, 6.66]7, и —24,v*— —[6.6, 0]7, у= 
V рх) V f(x*) = —[20, —6.66]7, FEU, y= 
(?, Hoy =(У°, у’) 443.6, E ERU 


0.33 0 0.9 —0.3 
0 0 —0.3 0.01 


因此 根据 (8.12) 式 我 们 有 


0.43 0.3 ~ 


Hı=Ho +A, +B, = los 0.99.) 


现在 从 第 2 ЗАРАНИЕ. ву =-Н V f 
(xi)= —[2.22, 6.6517, 得 到 x!-RAv!-[3.34—2.224, 
10—8.65A 17, UC f(x! ДУ УЕ А, 1.5 处 达到 极 小 ， 因 此 
#xt=x1 LA у! =[—0,01, 0.151", ЛЕНЕ, ARTERA 
xt=[0, 077, БАНЯ ЛХ; 然而 由 于 计算 中 
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ЛЕК, XE x'íc0. AAP fii ЯН», 就 有 
ut =Y —[3.33, 9.85]? 
V f(x!)2[—0.18, 0.1617 
y!-Vf(x?)—V(x')--—[0.2, 6.57 
H,y!'—-[2.036, 6.56]7, (ut, yl)=64.866, 
(y, Hiy!)—42.9 


直接 计算 可 得 
A [= es] p 93 0211 
|! 40.51 1.5 2 17 — 40.81 0.99 
于 是 按照 (9.12) 式 有 
0.8 0.57 
Н, =Н.+А, +В, = р 5 1 5) 


TEA IH, € Hesse ЕА р КЛИ ДИ, 
#19-14 ЖЕН (и, я.) = Halti). Ë 
可 以 改写 成 1(X) =x7Ax， 其 中 
1 о 
A= Ё 2 
队 x? 二 [4，4 了 ?出 发 用 变 尺度 算法 求 此 函数 的 设 小 点 ， 阐 BH 


XXIII E. 
[#1 Неве АНИМЕ 


[i 


遵照 变 凡 度 算法 的 第 2 步 ， 计 算 Vf(x?)—Ax'—e[4 8]7.E 
vas —H,Vf(x*)e—[4, 877, Ик) =- (48 
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—160A-F1444*) , BE 2,420.56 Фр А, Ех! += 十 
Асу? —[1.760, —0.48]7, 
ERE R BERERE BOR ЗР, ПЯ 
u=} =[—2.24, —4.48]7 
Vf(x')-[1.76, —0.96]* 

y= Vf(x!)—V f(x?) —-[—2.24, —8.96]7, (ut, y*)— 
45, (y*, Hoy!) 85, ТЕН З ЯН A aB ,的 
公式 ， 得 知 


[0.11 0.227 
А„= | 

-0.22 0.44 

—0.059  —0.235 
日 ,一 

一 0.235  —0.94 


辐 此 用 (9.12) 式 便 得 


1.04 —0.02 
Н, =H, tA, +8, = | | 


—0.02 0.5 


REA =[1.768, —0.48 ТЕНИ 37, Ж 
ЮВ, Ev =H, Vf =m., 0.51]7, ЖА 
НЕО PAEA =0. EARR AA x* x! AN? 
一 站 0.02， 一 0.001]?。 遵 照 第 3 步 算出 

ul =a viem[--1:.78, 0.48]7 

Vf(x*)-—[0.02, —0.002;* 

y'= VfQ?)-—- Ук) =Г—1.46, 0.6917, 
H,y!-[—1.86, 0.5237 
(u, уг) =3,51, (yl, Ну!) 3.18 


ВИНЕ, KEA ШВ, 
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0.87 E 
А, = [ 
—0.236 0.065 


pe 0.256 
В, = ] 
0.256  —0.066 


ig359.12) A 


1.02 0 
H,=H,+À,+B, = [ ] 


0 0.499 
正如 我 们 所 期 望 的 ，Hs 是 Hesse 和 矩阵 A 的 近似 赣 阵 ， 


习题 与 题解 


3-1 试 证 由 (9.2) 式 答 出 的 二 次 遂 数 Е" 中 有 一 个 绝 
JAURERRIA =A b, 

[证 ] 在 第 二 章 中 曾 给 出 了 绝对 的 或 全 局 的 极 小 点 的 定 
X. Жш AGERE) СА) = — A^ b, 
其 次 我 们 定义 $00) ei QebAC)TAQCEAUb), BELA 
Еж, KUNTARA- A bpo). S54 8609) 
=o, 我 们 进一步 可 以 看 出 

$(x)= —x"Ax+b*'x-r -y bab 


=/G)—c+ — 5тА-Ь 
=] (х) —f(x*) 


Я ETSI (x КН ЗВТ, HAA x>ex* f(x) 
ft). CX BOB Н ТАЕ М, x= x* OHER 
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小 点 。 . 
9-2 RARE nXsERAD«ORME, ut, Pel,e, nj 
РАЕН, МАЕ 


AL = uf (ut)? 
А -} (u')FAu* — 


LE] 设 x 是 E" 中 任意 一 个 向 量 。 我 们 定义 


1 и? (ut)? 
B= y (u* )FÀu* 


i=] 


Ж) 19—06) ЖЕ. "DA 
ы 1 ТМ? 
BAx=| Y EE 
$ =: 


E Ах 
` (u*) TÀu! 


因为 对 E* 中 的 每 一 个 向 量 x 都 有 BAx==x， 所 以 BA=1, 此 处 
X лихо. НАВ=А'. 

9-3 Ж /(х)жЕ КР, ut, kml, ПЛАНЫ 
SED. ЕЕ Eu,” ut, RRR, HEKE 
ВЕРЕ, АШАРИ Н ИС n) APA 


(и, VfQGt*t))e0, koi, m, d 


[=] RAAE, RNET PEZ [S] LU HI — P 
重要 全 局 性 特征 。 应 该 注意 到 ， 对 每 一 个 使 用 一 维 搜索 的 下 
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ЕЕ, ЕЖА, BRERA, Y f(x!) 

二 0 总 是 满足 的 、 然 而 Cu* ,VY f(x**!1))=0 并 不 是 对 每 个 下 降 

算法 必然 成 立 。 正 如 例 9-6 中 所 阐明 的 ,向 量 WW，k==1 ,#8 

是 线性 无 关 的 ， 所 惨 对 4 二 1，…， naut, V=% 
ту /(xs)=0, Bx" —x*, 

在 选取 最 优 步 长 的 方法 中 ，xs ROMA x* H EON ur sÉ 

ЖИЗНИ. н (9.5) A Een xf xtti 

V f(x *1) = Ах *1 +b 

r кы $41 n 
=A] x + à. A; u pee 


= V р(х) + Y A Aus 
Aiar, Vf(x'*'))m(u*, уу) 


4-(u*, у 2 Ruf) 


$sktl 


ВИ РЕЖЕ, RIAU, Vf(x**1)) =0, 而 接 所 给 
[н] Ж} ПЗЕ В 


$41 1+1 
(ut, у A Ru!)= A (ut, Аи?) =0 
РТ ET ESI 
IN АЛАШ in) 


(и, Vf(xf*15))m0, k=l, ++, í 
9-4 ЗАН, REEE, ERO. 12) 式 计算 出 来 
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BARH ,1 也 是 正定 的 。 
[E] МНЕНИЕ, 使 
得 (G1) 二 Ht。 于 是 由 (9.12) 式 得 


(x, Hi 443) mx, Hx) 
(ut, X)! (х, Hay)? 
уб, шу (уб, Hy 
_ (р, р!) (4+, 9) —(р'д?)? 
(9*, q') 


其 中 p' == 6,х, q'G,y!. ШЕНОН x36y'. 
mj Schwarz 3 Е 9 ВОЕН. E 一 
Зх буѓ, RI ERES y! =g egi = A(x!*! —x*) Aut, 
ры: 。 于 是 | 


1 А 1^2 
(к, Ни) 0 EE etur, Аш) 


ВАДЕ, ТНР НЕН, HIER H, (Es. 
9-5 对 Fletcher-Powell 算 法 验证 


(uf Auf)—0, 02А | (9.13) 
5H Н.А —u', 0 В (9.14) 
其 中 =0， "i, 


[证 3 ”用 归纳 法 证 明 。 证 明 中 最 重要 的 是 妇 纳 步 ( 归纳 
13925225). = (9.13)91(9.14) X0 Api Sr, ЖП Е 
明 它 们 对 有 二 1 也 成 立 。 记 人 一 V f(x*)， 由 (9.5) 式 有 
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d-l 


g =b+ Ax =b Ax**1--A y од 


#wi +1 
k-1 
Á и! 
+ PA 
НАЯ OR КОНВИ E АЕ, Ж 
(ut, g*)-—(u*, g' +1) =0, 0<i<R (9.15) 
РЇ (и', AH,g*)-- CH, Au*, g*)-(u*,g*)—0, MAAA 
A&gH,g*-u*, (и, Au*)/A,—0, >к (ut, Aut) 
—0, (08) Р (y^, H,Àu*) =(у?, u*)—(u*, Auf) 
—0, gick, р Н, Аш =H Au! и", 0<¿<b, 其 中 
#=0,1, е, n—1. 
$T (9.13) ХАНЕ E] Eu, (6=0, e, n—1) EXT 
АРЕНЫ, AMRETA. ДОЗА, а" 与 所 有 
的 业 正 交 ， 于 是 四 = 二 0。 按 我 们 的 定义 ,Fleteher-Powell 算 
Ж AFE IK BER. 
9-6 在 Fletcher-Powell 算 法 中 ， 耳 明 


| 1 
А- = A: 


[证 ] 9.13) АН ZEXET AME EE TUE. FA 


A B ut(u! T _ uf(u! )* 
і (uf )*y* mm (u* )* Aut 


. WM а “ү uf (и! г 
o BAS у-у 
如 问题 9-2 申 所 证 ， 对 任 章 的 xE ЕЗ, ФТБ. 
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"T гут 
ing 
НЕВА-=І, НН Нях о ВН, 3 8B—-A!. 

9-7 设 A(x) 是 由 (9,2) 式 给 出 的 正定 二 次 函数 ,由 (9.8) 
滤 给 出 的 经 过 修正 的 梯度 方向 所 生成 的 一 组 向 量 记 为 Y! ,ft 二 
1,775, n, МУ (=, +, пуд T Am ud. 

[证 ] ВЖЕ. RAAHAA COSE 2) 
进行 分析 ， 因 为 它 是 证 明 中 最 量 要 和 的 。 妥 争 候 设 是 ， НЕ 
VI, ++, 1) РАНЕЕ, Gg =y /(x'),vt = 
一 绎 十 azvi 5 ， 其 中 w+ 是 米 知人 参数 。 利 用 问题 9-3 的 结论 得 
5n, (v*, g!)=0#FR=1, <+, i—1f06—1, НИ, 
因为 当 h<i 一 1 时 ，9' 和 Yt"1 正 交 , 我 们 有 一 {9g*, 99 = 
《一 入 十 cayi 71, g!)-(v*,g) S0, E BUR —dP vt 
TE ETE НИКА ВЕНЕРА. ЕЕ, 
жи kA Ау, ЖИП ГАП у =LA) 
(x** 1 —x*), НЕА, MARZPÉ— VN 


ВАх= 


—(v*, Av! )(v*, Ад’) = gone, Ag!) 
=, (Aim), gf) 


1 
一 和 人” 一 9 ，9 ) 一 0 


R1, e, —2Bb, v! Пу” Re FAM TK, 
ЖТТ ШЕН РАНЕНЫ, it 一 
ЖЕНЕ k КЕЖЕ ATA Eka вун ТЇП ЗЕ В B. 由 归纳 法 G W 
和 (9.8) 式 ， Riv! ! —5—9' a, Ито, = 
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llg*7* 2/1 a7? 2. ELUTHR GELS 35 (41-2, 9-1) = 
0, НН S — (172, g= |922. TE m Ж 
ўа, =(9*, Av! 1)/(171, Av! т) „дру ди op Adi 
яти, Ау) о а 的 较 入 单 的 表达 式 ,我 
ЯКО Av 9 (72) Hg JL? x REUS T vfi 
СА) 7x! уйн (ут, Амет) = C4 |9. ` 

Te а П 271 g* 71 E? (9.8) 
Xi НИНЕ ЕН (0.8) 式 产 生 的 经 过 修正 的 梯度 方向 ， 
РАНЕ, 


1^ 3t 


9-8 对 f(x x)= Уа) G/0)1, а, 5>0, 
ЗЕ Се (0х1, xfi, x99D . 该 等 值 线 是 一 
Ж. uU MS (x, x))eCSCiEQ. x) 处 的 切 向 量 
ЗЕЯ, НИЕ 


9-0 考虑 正定 二 次 型/ 一 у(х, Ax) ,其 中 A 是 2X 
DEDE. хое нЕ HR, Ж! ЖА x° 出 发 由 最 优 
述 度 算法 得 到 的 点 ，x? 是 从 x! 出 安 由 司 一 算法 得 基 疣 点 ， 试 
证 x* 和 x* 的 连 线 通 过 原点 。 并 讨论 这 一 结论 用 于 加 速 最 优 梯 
度 算法 的 可 能 性 . 

“9-10 RO=- AORERE, RNR 
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Я 


Хх = ДР | 

Яру V f(x), ЗЕЛ = ПА, I х”} 收 就 
РУО ЛЧ. ERARE ЕЕ pa 

(а) IM- CX le, A 217 

(b) lAj= max (3 1а: д) 

(с) шах (Z |, 1) 
АННЕ РИО, 

3-11 考 感 (9.,2) 式 所 示 的 正定 二 次 函数 x)， 其 中 c= 二 
0, b=[1, — 23, 和 


1 —1 
A= » 2 | 

象 例 9-11 ЗЕРЕ, HFletcher-Pove l IERE ERI л 
^. | 

9-12 Ж f(x, х,)=2Х4,*%+-2х,%,-+4-55%], НЯ 
梯度 法 进行 四 次 法 代 ， 并 与 同 题 68-10 的 绪 果 作 一 出 较 。 

9-15 考虑 问题 9-12 中 所 给 的 正定 二 次 型 , 象 在 例 9-8 中 
ME, Hi Fletcher-Reeves ЛЕЯ Л. 
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第 十 章 ”二 次 规划 


二 次 规划 的 理论 ,所 探讨 的 是 约束 函数 为 级 性 还 娄 ,而 由 
ЕЕ, НЕЕ 


Tii САРИ R) ЕВЕ ЕН E ЗЕ „Н ЛЕ, RYE UNI 


HERMS- ОЖ Я ва ЕЯ]. АН 
优 解 如 果 存 在 ， 则 它 或 者 是 所 有 可 行 解 组 成 的 集合 的 极点 ， 
或 者 是 这 种 极点 的 西 组 会 《 见 图 101). 而 二 次 规划 的 最 优 
解 杀 一 定 是 极点 ， 它 可 以 是 内 点， 也 可 以 是 非 入 点 的 边界 点 
( 见 图 10-2 和 10-3)。 在 图 10-1，10-2 和 10-3 中 ,x* 表示 最 
fe. . 


图 10-1 图 10-2 


一 、 等 式 约束 
二 次 规划 最 简单 的 问题 是 寻求 带 线 性 等 式 约束 的 正定 二 
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次 通 数 的 约束 级 小 。 对 正定 二 次 函数 已 在 第 九 章 中 进行 了 详 
f TIO. CMRR ОЕ, ПОТЕ РУ 
确定 一 超 平面 。 我 们 能 直观 地 认为 ， 约 来 极 小 位 于 可 行 集 的 
边界 与 极 小 化 程 椭 球 之 间 的 接触 点 处 。 这 种 情况 在 ”中 入 
示 为 图 10~4， 其 中 过 点 (0，4) 和 点 妈 ，0) 的 直线 当 示 约束 超 
TH. хо Ж хе 分 绚 表示 无 约束 极 小 和 约束 极 小 ， 


图 10-3 


=. 可 行 解 


确定 所 有 可 行 解 的 集合 ， 存 在 着 三 种 等 价 的 方法 。 SB 
HJ mx n Е, с ЕН, 我 们 用 M Ж ЖИНГЕ] {Т 
инет. MM 可 定义 如 下 

M=(x|x€E*, Bxec, Хей} (10.1) 

BHS AREE, ЧЕ Ж L1) КН 
Bre, $ u—c-—Bx, y—[xT,u]*8 В=[В|!], 于 是 系 
# Вх <c, х=й У Ву=с, узо. вал, uid 
ВЕД В, хам y, nEMISUEXAUT 
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M={x| x€ E*, Вх=е, xz0) 

由 于 (10.1) 式 中 约束 x>0 dk x АВ, RME uy 
大 和 矩阵 Ва с 来 把 它们 包括 在 约 东 Bx&c 中 。 这 就 时 
ШТ M 的 男 一 等 价 定义 

M={x|xXEE", Вх<с} (10.3) 

H (10. ЗВЕНЕ M 的 几何 性 质 在 附录 中 讨论 。 我 们 

假定 极 小 化 的 正定 二 次 函数 f(x) 给 定 为 


О) e bx x?Ax | (10.4) 


=, Kuhn-Tucker dg fF 


在 第 四 章 里 ， 对 一 般 的 约束 极 小 问题 证 明了 Кийп— 
Tucker ей, ИИ Е ВА № ZE x 
ЮЕ. 2, ДЕ х 内 是 线性 的 , 因 而 是 nM, 
并 且 由 于 (10.1) 式 中 OOW Hesse ЯН А ВЕН, БТ 
ÍGO)d x 内 也 是 凸 的 。 我 们 能 把 Kuhn-Tucker 定理 应 用 
РК XU EL . 

Нана. ПАЯ M S editum. 我们 引进 
WE лед" $l B€ Es {ЕБ Lagrange ë P, 2 x* At 
L* 表 示 相 应 变量 x， 入 和 上 的 最 优 值 , $ y"=c-—Bx*, F 
其 这 一 问题 的 Kuhn-Tucker 条 件 由 下 列 方程 表示 ， 


Вх* Ну*=с (10.53) 
e Ax* ВТА * — ut ——b (10,55) . 
(хе, ре) СА", y*)—0 (10.50) ` 
x*, уе, A*, ре 0 (10.54) 


其 次 ， 假定 M (10.2) AGE, TERRE] Kuhn-Tucker 
条 件 是 


$ 273? 


Bx*==c (10.6а} 


Ах Ве ре —b (10.65) 
(x*, p*)=0 (10.6c) 
x“, н*;>0 (10.66) 


最 后 ,假定 M 由 (10,3) 式 给 定 , 相应 的 Kukn-Tucker 条 
件 为 


Bx*+y*=c (10.76) 
Ax*+B7)*=—b, (10.15) 
(A*, y*)20 (10.16) 

À*, у*>0 (10.74) 


、 约 束 对 极 小 化 问题 的 影响 


желан, 我 们 讨论 了 出 (10. 攻 式 给 定 的 天 内 的 无 
约束 极 小 化 问题 ,现在 我 们 研究 线性 约束 对 这 问题 解 的 影响 . 
假定 村 由 (10,3) 式 给 定 , 令 x! 表示 由 (10.4) sx Aj FOX) 
HEARR D, TARRAT хо = А1, 2 x" ж 
Br(10 3): AE BJ dB aM LE f(x) KARE. da ЖОМ ЗЕ 
zt, 由 于 f(x)#E x XU FERES, AU x* 是 叭 一 的 。 令 7 Ж 
示 昌 的 第 了 行 髓 量 的 转 置 ，7 一 1，…， 雪 ， 风 可 以 把 约束 不 
AXXd, xu, J=1, +, т, ПЕЖО”, 
X)szc, Ж 为 第 了 约束 。 如 果 (b7?，x) 二 cy， 则 第 j GEEK 
HE ЗЕ, x)«cc,, ШЖ j 约束 是 非 紧 的 ， in X, 
X)2c,, MRE ; 约束 ， 

5 ЖАЯА Lm УТ ЕН С S*, 
НАНА x* 处 是 紧 的 ,然后 求解 在 S" 约束 下 ОН № 
化 问题 ， 并 以 x* —x[ S* ] 来 表示 这 个 解 ( 见 图 10-5 和 10~6)。 
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Ei 10-5 


Bi 10-6 


在 图 10~5 中 ， 由 (1 表示 网 约束 在 х* 是 紧 的 。 图 10-6 给 出 
HABER) КАЛЕВ Ki BE. Tabi, 
Крн, HA xL 1] 表示 相应 的 解 。 由 图 10-5 和 
10-6 3 A VT I x[ 11—x*, 

现在 令 S 是 整数 {1，…, no S Ф, < x[S] ЖД) 
TES BJ NSP I BEI. foExSICM, ERNE 
ни, Ib ВТЕ КЖЕ 
小 化 f(x)， 如 果 这 个 问题 的 解 违反 蜀 被 去 掉 的 约束 ， 则 
x[S]-x*, fiin, $5={1}, 由 图 10-5 和 10-6 Я, 
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x[11€ M, ing A 5 НН (1), Я Sere dmm, 
ЕАН ЛИН. KARAR ЕЕ 
(OU 10-6), ЯК x[1]9x*. 5-58, dE 5={2}, 
И (2) 10-5 $8 10-6 所 示 。 图 10-8 中 的 x[2] 是 当 
《2) 为 紧 约 来 时 f(x) 的 航 小 ， 但 由 这 些 图 明 最 可 见 ， 无 约束 
ЖЛ Б (2). Akale, БФ xt-x[5]. Я 
TOS ЕТ, ce, нЕт 55, бита, 
З х5, JETO) ТЕ S, #J WfE2 RE RUNE BJ Л. F 
是 x[S : РЕМ S— S, 中 的 一 个 约束 ， 在 图 10~7 rh, 
$={1, 2}, x*ex[ S], REA S mS), BE 
5:=42}, 那么 很 清楚 x1 1538 £93R (2). 


B ют 


Bli0-5, 10-691 10-75518 Тая — DC HL [8] Я 
的 影响 。 这 一 性 质 的 一 般 结果 我 们 可 在 [Н] Rü 10-3, 10-4 和 
10-5 中 证 明 、 


五 、Theil 和 Van de Panne 方法 


在 前 一 节 中 讨论 了 线性 约 宁 对 二 次 规划 解 的 影响 。 很 清 
‚т 216 * 


4E. MRE хе АКЕНЕ ГАР. ИГРАЕМ f(x) 关于 
EPI BSI х*, Вл, 一般 预先 并 不 知道 在 x* 处 
的 紧 约束 。Theil 和 Yan de Panne 方 法 通过 选 代 算法 拷 千 
这 些 紧 约束 TTEejl and Van de Panne, 1961], WAE 
НЕ ЕВЕ. 
1. Hx =A h, Яя (ут), РУ, 
x°). 4 V[x* 1-4 fe, vm) (b, x9)2e y, m 
Уха, ОШ] x=, ЕЖА, mue, 

2. Хаа, C, RREA, nn, m} 的 
TES e. 每 个 Se ë V[x[S, 11362. ЗЕЯ W 
d 5,.1=5, ОАА, НАУ 5,1, 计算 
xX[S,..1, 8 V[x[S,..,]1, #3. 

з. mS n JEZA, ИНН T dE 5,6. 中 
的 每 个 约束 轮流 丢掉 不 予 考虑 ,将 San 中 保留 下 来 的 的 W. 
ЧЖАН, 并 使 f(x}) 极 小 化 ,如 问题 的 解 都 违反 从 Sh + 
ВЕН, M| Spams х[5,.: ]==х® ‚ ЕЖ, 
maj Croo ВЕ VEx[ S, 41] 92219 ss 集合 Зан 
的 全 休 ， 转 向 2 。 

Hio- 考虑 具有 图 10-8 所 示 林 集合 的 二 次 规划 问题 ， 
假定 正定 二 次 函数 的 等 值钱 是 以 x" 为 ИЦ, 问题 是 
求 约束 极 小 x*， 

Г] BEL 10-8 中 有 五 个 约 HS (о, ee (52228. 
令 耻 [Ex] 表示 为 x 所 违反 的 约 东 的 集合 ， 于 是 由 图 10-8 得 
V[x']z(1. 2, 3}. $ S, — (3, ШХГ, ]=а, V[a]= 
(2, 3}, M$ S,—1i2), M x[S =, V[b]—-(3), 35d 
Ho S,—(G) AME $, ]=е, V[e]1— (1, 2}, НР 5,0) 
每 个 选择 VOLS Jli, 390000 1 还 没有 找到 最 优 解 。 
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现在 设 Sz 为 {1， 2), 0, 3}, {2，3} 中 的 任意 一 个 。 
$:=41, DH, х[5.]=и, АНИ 10-8 知 [uS 集 。 
жб. XP S.—(2, HR xDS.]—v B ИГУ] 是 空 集 。 但 是 
3 $: ={1, 3}, xFS;]=w, НМ 10-8 Nt, V[widE 
=, 


图 10-8 


HF И Уй {ч М Уй, ВОИ и 和 v 的 最 
rk. Юи, XH S,=(1, 2}, ВИА $ 5=5,—{1} 
={2}. FE x[S]=b, mi 10-8 Л, ЖМИ x), 
所 以 U 不 能 是 最 优 解 。 | 

ЕЖУ, 这 里 Ss 一 12, 3}Ң 8 一 $s 一 {2} 二 {3)， 
Ф х5 1==с, 55279102), $ 5=5,—{3}={2}, 得 
x[S]=h, BERRAR), БУ 满足 最 优 性 标准 ， 通 过 
步 又 3 我 们 得 到 x*-v, 

110-2 EC KARI, M КЭ АТЕШ: S 
X,220, 112063 f 2х,—5Х„<4, WMIE]10-98F E R 


8; Р) = X Rice b?x, Rap 
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1 —1 
b-[ —2, 1] тА ,| 
Я Theil м Van de Panne 方法 求 约束 极 小 хе 
[M] 首先 求 了 CX) 的 无 约束 极 小 ， 即 得 


A Ly 


x° 的 位 置 加 图 10-9 所 示 。 很 清楚 它 违 反 两 个 约束 x 十 xs 
过 3 和 2X1 4,4, RE x 3 ,=<3 F $ WOUJ 2X,— 
SLA 2928 Ж(2), Л V[x*]o(1, 2}, BR S100. 为 了 
RES L 我 们 把 Lagrange 通 数 写 为 上 (x, А)= 0) 
A 4 x,—3), 得 


„дЕ =x—x I — 2-FÀ 
oL __ 
aL ді Я Lal = | ~ * 
Hi Эх, 0, JẸ ху=з—3А 和 Ya 一 1 一 24。 由 于 约束 


《 蕊 现在 为 紧 约 来， 我 们 应 该 选择 A 使 zx 十 xs 一 3。 因 此 
А=0.2 #1 х[5,1=[2.4, 0.612, 30910-99253 点 a, 
PER, ажио), | 

Xt 5,—121. 利用 Lagrange 梁子 法 ， 我 们 得 xLS, = 
[2.4, 0.817, 在 图 10-9 中 表示 次 点 和 了。 类 似 地 ， 点 b 韦 及 
#791601), 

由 于 У[а] ={2} 41 7[Ь]={1}, adn b 都 不 是 最 优 解 。 
BERE S,=11, 20f888 A x[S,J, ЖЕ S, mn 
的 约束 都 是 紧 的 ， 目 图 10-9 19, c SEDE E AS ECI)X, Wë 
ДИМЕ 3. D. х[$,]=с=[2.3, 0.777, 
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В 10-8 


由 于 上 不 违反 任何 约束 ， 它 必须 受 最 优 性 检验 ， 令 S= 
$:—{1}={2}, 81 x[S]=b, "ums EDO). O8. 
4 S-S,—(2)—(, SI х[5]=о, ВЕ), H 
НЕ, x*—co[2.3,0.7]*, 


六 、 对 偶 问 题 


现在 考 开 在 (10.3) 式 给 定 的 集合 M К (10.4) НАУ 

ОМЕН. ЖУЗ ИН, НН 
另 一 个 简单 得 多 的 二 深 规 划 来 得 到 。 原 问题 的 Kuhn~Tucker 
gE BOOTED ER ERRE А 为 严格 正定 。 于 是 
我 们 解 (10.75) 得 到 

хе == —A*1(B7T4*-Eb) (10.8) 
将 x* BU AKINA (10.70), $93] 

—ВА-: (B73*---b)- y* —c 

它 避 改写 为 

р ле—у*= 0 (10.9) 
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Buh D—BA-!B? яп d—c--BA7!b, FL2E(10: 70), (10. 1d) 
#1(10.9) 


min fark ++ ADA) 


给 定 的 约束 极 小 问题 的 Kuha~Tucker 条 件 。 由 于 这 后 一 个 
二 次 规划 只 有 形 如 AIO 的 约束 ， 解 下 问题 要 比 解 原来 的 ЇН] 
题 简单 。 它 被 称 为 对 侦 问 题 ， 在 习题 10-9—10-11 中 将 要 讨 
论 它 。 如果 A 是 这 一 纺 东 极 小 化 问题 的 解 ， 则 原 问 题 的 解 
x* 能 由 (10,8) 式 得 到 。 


+. Hildrethf£üD'Espo;£ 


这 个 方法 以 解约 束 航 小 化 问题 


dD 


Аа 0 


为 基础 ， 解 出 以 后 再 利用 (10.8) 寂 求 x. (10.3) rh 
WER В 是 行 满 秩 的 , 则 D 是 严格 正定 的 。 否 则 了 是 非 负 定 
ËJ, 在 这 两 种 情形 里 已 的 对 角 元 素 都 是 正 R. Hildreth 和 
D'Espo 方 法 是 通过 使 用 从 X=0 开始 的 一 维 搜索 iE. ИЕ 
述 约 束 设 小 化 问题 。 - 

1., HI D=BA-IB? M d=c+BA-h, 确定 9 和 ~ 
ФАА АРА, ММ 9g(4) 一 0 得 下 列 关 于 Mute 
m) 的 线性 方程 


dit ўа азо ! B (10.10) 
j=l 


Жо. АН, {== 1, "md, JR dis s 分量， d, i 是 了 D 
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的 第 订 元 路 。 | 

2. ФАК, ЖИКА АА, ©, 
m, j73)8(10.10) 3495 AP! =тах(0, 2,)4 A, 的 
新 值 。 

3. 如 果 和 天 02 ， 则 转向 2 , Ж“ {ЕЕЕ IM, Я 
A A де, Bo. s) хе = — A"! (BTÀ* 4). 

例 10-3 解 下 列 二 次 规划 问题 。 其 中 集合 M 为 不 等 式 
0<х1<1 060,51 所 确定 ， 


min f(x) 


其 中 
161, %2)= He 72)! (zx —2)*] 


[E] 这 问题 如 图 10-10 ИЖ, ЕМ 的 不 等 АЯ 
以 改写 为 Bx<c, Fih c=[1, 1, 0, 0 ， 和 


Bref 0 一 1 i 
010—1 
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ERER YX) 可 以 写 为 了 (%) e*t oon, ир 


b=[—2, —з1°ягА=[| 7] 


由 直接 计算 得 
г 1 n 


D—BA-!Bz-| 0 Р di 0 一 1 Jj 
—1 0 


=с -ВАІЬ 
1 1 0 | 
eru] ° ifi 27-2] 
0 —1 010 11-2 
~ 0.2 0 一 | 
一 [一 |， —1, 2, 21? 


BI A^ (0, 0, 0, 0]" 开始 一 维 搜索 ， 对 于 i 二 1 (10.10) 


式 得 
一 1 十 和 1: 一 023 一 0 


WU amado 解 此 方程 ， 得 分， 因此 41 二 max(0, 和) 一 
max(0,1)—1, #42, 3 和 4 同样 地 利用 (10.10) 式 ,我 
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们 分 别 有 Аф== le Mao А10 а 因此 入 А4, т, 0,0]*,;, 
现在 在 (10,10) 式 由 利用 和 i=[1,1,0, 077, 使 用 同样 Йй ЗР 
WFAA SL, 1,0, 0]%, - 

出 于 Nt 一 和?， aem ulii 我 们 令 Mut, 1,0, 
017. 现在 应 用 (10.8) 式 ， 得 到 


x*==—A-'(B"k"+b) 


гу; 

n 0—1 9 ‚| 
--[ s t 
L 

=[1, 1) 


在 图 10-10 中 ，jx) 的 等 值 线 为 图 族 ,其 中 一 条 经 过 集合 
的 边界 点 [1，1]”。 从 几何 上 考虑 可 知 ，fA(X) 在 由 上 的 极 
小 点 是 (1，1)”， 这 也 就 是 我 们 使 用 Hildreth M D'Espo 方 
法 所 求 得 的 管 案 。 

0110-4 MARERA, 2,20 和 3x 24,56 所 
确定 ， 并 设 f(x) = -x"Ax+b'x ВИ 


рр ma=[ 7) 


求解 问题 TAL fO). 
[9] ВЖЕ 


x*=—A Ь=— Ë ) 21. par 


市 会 局 极 小 。 注 意 到 Sat 213-42 86, ,因为 x* RM 
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AA ACRE 10-11), MACET, IUE f(x) 的 的 束 极 


小 与 全 局 极 小 均 为 同一 点 ， 
现在 用 Hildreth M D' Espo 方法 求解 。 首先， 可 以 将 


定义 М 的 不 等 式 写作 Be, RM, 


c-[8, 0, 0]*3 в"= [3 md F m 


0 —1 
于 是 由 直接 计算 
3 2 
ах [1 я ВИ 
一 “IRF | <o; pan . 
pamare sp и а 
0 —1 
29 一 5 一 ?7 
[55m 
一 了 1 2 
和 


6 
сева 0 | 
0 


=[i, 1, 1]? 

H А%®=[0, 0, 07 — g RET i=1 我 们 由 (10.10) 
A 

1329417542 — TAs 70 
АзЕАз=0, МЕ, 17 L = 2.035, М i AP max 
(0, Ai) max(0, —0.035)—0, X i=2 0 3 以 同样 的 方 
ЕН (10.10), № Al-0 Ж А1 =0, 9 Аі =Г0,0, 
01", НТА = А, 一 维 搜索 已 收 族 ,我 们 置 和 *==[0， 
0，0]”。 现 在 用 (10.8) 式 ,我 们 得 到 


' х*==-— Ат (ВТА*-Ь) 
- 0 
i irs ;—1 oY 了 一 ! 
-- i .0 IM B Ч 
=[1, 117 
它 与 图 解 结论 一 致 。 


JN. Houthakker A Ж i; 


解 二 次 规划 问题 的 一 个 有 趣 的 方法 称 为 客 量 法 。 НЯ ` 
THouthakker, еже дем fO BS А 
EB. НИЖЕ M (10.1) E. Houthakker 引进 一 
LESE EA! 


я 
У х,а (10.11) 
t=] 


HARRE. MEANE Bx<e 中 有 一 个 已 是 容量 约束 
. 286 =. 


形式 ， ыы awina 9 9 


мня у оса, АТН wes, 


当 和 参数 ш 改变 时 ， DIXIE EC EM — u 
B gk М 中 的 一 条 折线 。 并 且 存 在 ws 548215 uou 
都 有 xt(u)yext(). TARER EM, B uut, 
ЕРО ЗЕ, WAA xt-xt(ut). EMRK $a 时 
选取 4#=0 ЕН uat. 

例 10-5 ë они x* ЛОМ. 确定 函数 
f(x) 在 如 图 10-12 所 示 的 约束 集合 M 下 的 极 小 。 

[RI 在 图 10-~ -12 rh, Жи, 19 eU u=", 


u=u,,-. н Y ume ittis. 对 于 所 有 u, Осиси, 


£21 
x*(u) ELT x, МЕ. Ж uou, ЯЬ, хе (ш) 的 轨迹 改变 方向 ,并 
МЕА ТАВАК НАВ, 直到 u meu, 为 止 . 对 于 所 有 
u, WLUKU, OTER =a k; НА ЯТ а> 
u*, x*(u) = 二 Xx*(4*)， 即 容量 约束 已 变 成 非 紧 约 束 。 所 以 
ГОО RE хехе (ие), 


10-12 
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-x 81028 SAPT fo; вые м Mex]: 
зав, ху, #120}, fHouthekker юри 
max f(x), o mos Á 


» DR]. 在 图 10-13 申 表示 出 集合 好 ЕКО, f 
BOSE AR ELLO, 0]7 为 必 的 贺 族 。 由 几何 直观 我 们 者 出 | 
ЈО) хе Го, ЗАВ, Mos M 的 一 个 极点 ， 
ЭДЕ ЖЕШИН xi xx Eigse, {ЩЩ 
x;i+<x,;=1 , WE 10-13 所 示 。 由 几何 直观 我 们 君 到 ， 


Py HO 满足 wita Sl 的 问题 有 两 个 解 ， RI, 9] 和 


и, n) TAM "JA 0 增加 到 2 时 我 们 得 到 OT: 两 条 
й. 


10-13 
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argus aped uos Анта ÈM | 
EX "Bios vs, uy. ЕР 


由 几 全 直观 可 看 出 ， P Hoa anon ecu 的 问题 有 只 
ГО, wJ”, хун £, WEET ОЕ; 98 


СИЕ НЕО, зу. S aos НЕ e M 
容量 约 康 变 成 非 紧 的 ， 所 以 х*(3)= te sF 是 最 优 解 。 


A. TT 


————€ 
E, MH ESFM ERI ЕШЕ T SFU SEP S6 ERE, 
只 要 我 们 考察 一 下 二 次 规划 的 区 thmTucker 条 件 ,单纯 形 法 

的 应 用 就 请 楚 了 。 - 

为 明确 起 见 ， НМ: (10 m NK uhn-Tucker 

条 件 是 


_ Вже um P (10.82) 
Ах В" инр | ` ` (10.66) | 
(хе, p*)—0 "0. (10.66) 
x", реро Í C10,6d) 


按照 kuhn-Tuckerg M, "TITO ва) #1(10.6 
Е нии д (10.60) 1010.64). DELE E Kin 
ЭНН ЖИПЧЕ. (10. ба) 91010.65) кН Г (mr 20) 
“Ый u=[xr, АТ, рт, ИНОЕ та 个 非 零 分 
Е, RUD SESICILOIA-S) | 

Pt хае [ хе", Нер (10.62) d1 (10.65) ЖЛ, А 
AR (10.60) 81(10.6d) 5X, 08 (10.64) 1x, a 20, T Е 
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(10.6c) 3X] € x,—0 或 p,7—0,i—1,-7,n, ARRA umm. 
Amtn 3E 4 RE LES E (10.50) (10.65) ҳач ЛЧ 
B ER CL0.60) (10.64) 5 „ПИ 'É (10.62) C10. 65) 式 的 
一 基本 解 。 但 是 ， 由 于 (10;66) 和 (10.65) 式 的 每 个 基本 解 不 
一 定 满足 (10.6c) 和 (10.6d) 式 ， 所 以 解 二 次 规划 问题 ， 等 价 
于 求 《10.69) 和 (10.65) 式 的 基本 解 且 又 能 洲 足 (10.60) 和 
《10.6d) 式 ,在 附录 中 讨论 的 单纯 形 法 是 生成 这 样 的 基本 解 的 
有 效 方法 。 但 是 单 环形 法 要 加 以 收 正 使 能 求 得 满 足 (10.6c) 式 
的 基本 解 。 解 二 次 规划 问题 的 这 样 一 种 修正 单纯 形 法 是 所 
Wolf аж, 
Wolf 法 
о IER, z! 12220,25 (10.64) #1 
(10,85) 式 成 为 
By 十 WwW 一 c (10. 12a) 
Ax-B*4—r0u-rz'—z*-—b (10.125) 


ФА 26 (10.120) 1 (10. 120) HAC EZ хед) 
HATRA 2р 或 zi 至 少 有 一 个 等 于 零 。 这 个 解 也 满足 
(10. 6c) 式 。 这 一 基本 解 的 分 量 ， # m =e, (i=1,: sym), E 
中 假定 c 220, VAR 5,0, ЖЕ 如 一 一 0 ， 或 如 果 b, 
>о 23=Ь,, НЬ, 一 0, 那 么 是 否 把 z; 或 z? 作为 基本 可 行 
ЖЖ. 

т РАПЯЕНРЫС-ИВ) 在 И (0.128) 和 


(10.125) & XA b 0 ЖУ m М. RR N А, 


Ef Rr d жута CU p in ЗЕЛЕ), 
则 原 问 题 的 约束 是 不 相 客 的 ， 所 以 解 不 存在 。 但 是 如 时 基本 
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Зав oi CHI JESE 7-8 2 Рон н), 则 继续 用 单纯 
形 法 直至 有 一 个 u, 变量 出 现在 基本 可 行 解 忠 ， 直 罕 它 为 F 
E, 最 后 的 基本 解 ， 对 于 每 个 i 至 少 包 会 m 个 x: ЖЕ, 
М 21 Aul. И Tum. BOE it i š ер 
23 ,这 时 间 量 z 至 多 有 人 个 分 量 。 令 D 表 示 对 角 短 阵 , 其 第 宇 对 
лж, Шиа. =2 1, BUA. TERA M A 
РЕЯ 


T 


Вх=с (10.130) 

Ax Dz—-—b (10. 135) 

其 中 x，2z 六 0。 注意 由 于 长 一 0 所 以 满足 (10.6c) 式 。 现 在 我 
Пя, Ми, 222091610. 130), (10.135) E25 2g 


R R У ze SUN CR BE iT (10.60) дб 828 


£-1 

满足 ,我 们 不 再 接受 每 个 可 能 的 基本 解 。 于 是 , NUR x, 已 在 
ФАЙ. Шон, ЖЕТЕР, 反之 亦 然 。 用 这 种 办 法 保证 
{їй н, 不 同时 是 基本 变量 ， 因 而 对 雇 有 被 考 虞 的 基本 解 


有 (x, п) =0. а-аа У z =0, Hz-0X, 
É=1 

此 时 我 们 得 到 (10. 65) — 0. 6d) sS RE, FIRES К 

规划 的 解 ， 

例 10-7 用 人 ol 的 修正 单纯 形 法 求解 在 例 10-3 中 讨论 
过 的 二 次 规划 问题 ， 

Lie] 10-3 Н EERE OJE a E R 
&MIS AD ‚117 ERU SUMEONB10-10), ZENOB $1 
论 的 单纯 形 法 只 探查 集合 M 的 级 点 。 因 此 不 小 对 ol8 禾 正 , 这 
方法 就 不 能 生成 诸如 [ 1, 11? 这 样 的 内 点 。 在 这 个 例子 中 我 们 
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ЖЕ, BERAR nirpis EM TRIBU, 

首先 我 们 引进 一 松弛 变量 x,70, ЕАМ ® 
式 可 以 写成 33,1 4- 2x4 X34 8, х1, Xa 59220 АИ 
JgBxze, x 之 0， 其 中 B=[3, 2, 11, x—-[xi, ха, хз" 
Жс=6, ЖЕМЕ (10.2) ха, 我 们 可 以 使 BO, 62) -— 
(10.6d) xi, | 

У Е хо, РСЯ 10-3 НИНА ЖЕ 
b, 为 了 使 (LX) 象 在 例 10-3 中 那样 仍然 为 x1 和 xs ПЖ, 
我 们 定义 


b—[--1,0,0]* mA-l. _ un 1 
- 0 0 o~, 
方程 C10, 12a) (10, 125) 8] 5g 
3347 2x5 Нл, Ни =6 


2X /— 3X5 -F34— u, +2i— z1=1 
—x Fx, +24A—H IÍ tzi 210 
A—u,rF21—21-—0 


现在 按 Wolf 法 的 头 一步 ， ле = и, =, =0, W H 
x, lx, Е, 21, zf ДП 21 ПЧК. КЛ 10.129) st 
我 们 得 到 


u= 1+5(z1—z1)+7T(z1—z1)— x, 
JUEwfEI21,21,21,24 915, 的 函数 ,为 了 在 约 宁 wo 


21, zl, 27,28,5320 下 求 极 小 ， 可 以 使 用 单纯 形 法 。 拒 
是 为 表示 明星 起 自 ， 我 们 将 极 操 简单 的 代数 考虑 解 这 一 间 
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Ri, 

#7720, НУЛЯ mm 
fEw-—0, РЕНО Л, — ET AAR 21 m 21— 
1, zie2i-04$0x,13. BETRA ХРЕН В, 还 存在 
许多 共 他 可 能 的 选 霸 ， 在 而 ojji 方 法 的 第 二 部 和 分 中 利用 单纯 


形 法 直到 У zi 一 0， 这 意味 着 我 们 必须 确定 一 个 解 ， 使 当 所 
. f=] 

Нарнии. -ARE UEA EID 
2 二 22 一 23 一 0 和 *s 一 1， 此 时 我 们 有 *, 一 1 т, =1. ЖЕШ 
Tuc -u—0, 8| xip-FxiBicbxXiuO—0. ВНЕ 
代入 , RMA H x=[1,1,1]7, 2 [0,0,0]7 和 % 一 "满足 
(10.60) —(10. 6d) РЕН Kuhna-Tuckerzg B f$ Sx = 
[1,1,1]7, EH x, Xé— TEES, BIA хе = [1,177 £ 
出 二 次 规划 问题 的 解 。 


习题 与 题解 


10-1 设 由 (10. 们 式 给 出 的 入 x) 是 正定 二 次 函数 , 定义 
ЗИН = {| x€ E", Bx=c), RAE minf(x) 的 解 。 _ 

[S1 ПЁ ВЕ Ут mxniBRE, Кш mn, 
由 于 五 gm f(x) РЕП, ЕЕК. 
MEAZA LagrangeBE 

L(x, A) = + ХРАХ+ (ЫВА) ке (10.14) 


HipaeE"RLagrange3E THE., ATHAR А, L(x, A) 
# nE— BÜXE д 
х(л)= — А-1 (ВТА) . (10.15) 
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NUREXCA) € H Ж C10. 15) у 满足 Вх) =с. SUR 
A*-—(BA^3BT)(c-HBA^Ob) (10.16) 
x*— -А-1(6-+ВТА*) (10. 17) 
RRt РЕН ЕН Л. 


10-2 在 回 题 10--1 中 ， 证 明 存 在 一 个 #Xf НИМ, 
俩 得 对 每 --XxE 五， 有 Wg(x) 一 x 一 x*， 其 中 g(x) 一 Y7FCXD)。 


С] 4w-B"(BB')-'cfiz- —g(w)  — (Aw-b), 
WIBA-!z- —(c-FBA^'b), В (10.16) 3 2881 
A*-—(BA"B"7) !BA"!g(w) (10.18) 


由 于 了 C(x) 是 二 次 函数 , 则 有 gCW) (х) НАС х), SE q(w) 
BARRA (10.18), БИЯ Fx € H, Вх=с, RI 
有 


дъ — (BA-B^)-!BA-!gG) (10.19) 
现在 将 (10,19) 式 的 Хе 代入 (10.17) 式 , 量 新 排列 各 项 ,得 到 
Wg(x):--x—x*. Mh 
W—A-! —A-!B*(BA7!B7)-BA7! (10.20) 
现在 下 于 TET А-н их НИ, A NW En xn > 
阵 。 XJE XP XR. ХНА ЕНЖН,А С ВТ(ВА 1 
Вг) ВАНЯ, На РНЕ, 


10-5 ИМ во. зд, f(x) m0. ОА, 
令 x* Жл Лх) Е М ЕЕ, ШИР, S* АЖ 
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(1, +, miT R., 对 于 了 ES 有 (b^, x*)oc,, E 
B х+=х[5%], 

[E] 我 们 利用 Kubn-Tucker 条 件 证 明 这 个 结果 。 由 
CTx*€ M, (bt, хе, 对 元 论 怎 样 的 7 了 闫 S* мхи. М 
0. 75) 3t 8381 


Ax == — у А? (10. 21) 
LL! ' 


FERTA SOC ES"), A(0.70) R1 (10. 7d) 式 得 到 
(3; 6 S*BRE)AS—0, 于 是 (C10.21) 式 变 为 
Axt+b=— 5 43b (10.22) 
Кы 

从 (10.22) 式 和 给 定 的 假设 (b^, x*) -C,,] € S",3E 83 x* d 
足以 S* mpeg RAS ARARE, ГО АИК ава-ТисЕ 
47 条 件 。 这 各 小 点 以 xX[S*] ZUR. 由 于 JO) 是 严格 凸 的 ， 
它 是 唯一 的 , ММ х*=х[5"1. = ! 

104 S 是 整数 {1，…，m} 的 一 个 子 集 , B X[SIC 
М, ius ke S d keV[x[S 271, ixi x[3]ox*, 

[W] 10-1, 我们 有 


Ax[S]g-b- — ЗАВ? ` (10.23) 
"IE 
(hi, x S-c, JES . (10.24) 
现在 任意 选择 上 E 595， 再 次 利用 问题 10-1 的 结果 ， 划 得 到 
AxLS ~)+6= > jb? (10.25) 
(b/, x] $S—&]-—ec, j€S—Ë (10.26) 
TREH 
(b^, [SRC (10.21) 


3$,18(10.23)-(10.26) 5X, A 
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(x[S1—xLS —&]), A(x[S]—x[5—581)) 

=2,[(b#, х[5—Ё]у—с,] (10.28) 
HT AGER (10.28) ЕЕ, X (10. 27) АМ, 
(10.28) зл pk E 18 S RAJ Je 3E f ET ERE] PUR R € S 
有 ,>0。 把 这 一 结果 与 (10.23) 式 和 假设 x[S1E 凡 结合 起 来 ， 
便 得 出 结论 说 x[ S ) 满足 关于 miaf(x) 的 Kuhn-Tucker 条 
件 ,从 而 Xx[S]=x*。 | 

10-5 假设 xt—x[S], НН (i.c, mS Ж 
FEFE., MNES CS, 8 5, =ф, ШЕЕ 
АВЕ5-$,, ke VECS] 

[证 ] #1889], BUTx[Slex*, [5] 满足 为 Xe 所 
满足 的 人 upa-Tucker 条 件 ， 这 意味 着 XLS] 满足 (10.23) 和 
(10.24)5t ЗН. 2,220, (bfx[ S3) e,. JES, МЕХА 
Sics, х[5, ] 所 满足 的 Kuhn“Tucker 条 件 如 下 所 述 

AxLS, e Bb! (10.29) 


(b^, x[5,]) mc, ij€3, (10.30) 
由 (10.23) 和 (10,29) 式 我 们 有 
A[x[ 5, ]—x[5]]— >> ш, bi+ E14sb! 
68- B1 


利用 (10.26) 和 (10. 30) 式 ， 以 及 代数 运算 ， 得 到 
COLS JES DAS =S= Yat h^ 


FLELEM 
хі5,1)—е;] (10.31) 
因为 & 是 正定 的 ,[10.31) 式 左边 非 负 , 且 对 所 £6 S—S, , 
及/ 字 9。 因 此 必定 存在 至 少 一 个 ES 一 S11， 使 (b*，x 
[S]J)>c,. 
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10-6 Тһе 和 和 Yan de Panne 方 法 由， 必须 得 到 Xx 
[5 ЛЕжх°, AI, Вени. AR [S] 

[88] 因为 x[S]E /(x)#S 中 的 约束 为 紧 约 束 时 的 极 
小 ， 所 以 可 以 利用 和 柯 题 10~1 @ ЧЁ ДЕ, Е НЕВЕ 
br eS) 线 性 无 关 ( 非 如 化 )， 利用 (10, 15) 式 得到 


x[$]-—A-b—A-B'j-x* —A^B'y — (10.32) 


SoRXDS 42S Bx [S]—c,01B 2:38 (10.32) x, FE A, 
得 到 


A —(BÀ^B7)-! (Bx*—c) 
因此 
x[5]—x* —A7!B'(BA7!B^-! (Bx* —c) 


10-7 考虑 由 (19,4) 式 定义 的 Fox 在 由 《10,3) 式 确定 
ЕМ РЕЛЕ, ЗА 是 问题 


min [47+ iv] 


的 解 ， 其 中 D 和 4 旭 (10.9) 式 的 下 一 行 所 定义 .证明 由 (10.8) 
式 给 定 的 ‰ 是 原 二 次 规划 问题 的 解 。 

[证 ] 由 假设 at, ВТ хе (10.8) АЕ, Т 
以 x+ 和 2 满足 (10.7b7) 式 。 由 于 2 是 上 面 药 定 的 极 小 化 问题 
的 解 ,由 区 uhn-Tucker 条 件 可 知 ,存在 y* 守 0 使 得 D4* 一 y*= 
一 d fi(4*,y*) = 二 0。 利 用 方程 (10.8) 式 和 D 与 d 的 定义 ,可 以 
fR EHE IE HX пуж) E (10. 78) X LER E HI K uhin- Tucker Е 
Ho xt 是 原 二 次 规划 问题 的 解 。 

10-8 Hildreth я D' Espo Jj 法 利用 一 维 搜索 解 问题 
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as [eri ATDA |, WEDIR D RER e ut nici 


ARRENE AE. | 
[ЕЕ] 从 方程 (10,19) 式 我 们 看 到 ,由 于 dis 0, k; Ж 


"E— E. Ф ДГА] ата АТА, FEAA SARS 


=, ОЗ, LAJE 或 零 处 取得 关于 X，y ERME. 
НОЕН ДГА H]AA] BAAI hA 得 出 ， 我 们 可 
DUH Ai+1 一 了 (和 幻 表示 这 个 过 程 ， 其 中 了 表示 一 个 算 耶 ， 
它 描 述 搜索 方法 。 于 是 有 ЦТС) ЈА»), # EF 
ит (МЛй= А], НДА А = A*, 如 果 我 们 确定 有 界 区 Ж 
Д {МАР20, ЛГА ЛГА) , 则 对 所 有 8>0 kt e А, Н 
ЕАН, ВЯ. М МАТ 和 连续， 所 
ULOJ МА ЛЖ. XH TCX) 关于 AGE Ж, 
DITO X JETO 0948 9808 48. LETCA) JE LI T( X21065 
BEA. EE LI[T(1r)15 LEA 1] — PERI, ü= 
АЕ, ВИ LL T3] ДА], ААРА", 


10-9 (对 偶 同 题 ) 令 PG л) = хта ane |, x 
X N-((x, 3) | Ax--BTA— —b, Az 0) ДЖ max F(x, 


》) 为 min f(x) 的 对 偶 问 题 ， 共 中 f(x) 由 (10.4) АН, М 


由 (10.3) 式 给 定 。 假设 XE M 是 这 样 的 点 ,使 存在 某 А250 М 
RO, 13) € N, WAFF, А). 

[证 ] НТО, € N, dj Ax4-BTA — —b. UL x? Z № 
пр, АИИ, SIS SAUBx——[b"x- 
хтАх]. HT xcM, #8 Вх=с, РЕЙ: 390A220, МЧ 
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VASTE ATBxs;ATc, Dt —[b"x4-x"Ax у 7c 或 


[L xrAxt вех o - | toe te |i 002 FG) - 


10-10 (X A sE BE EU n 5 ИЯ хем, mi 
JA Сх", А) ЄМ, E B foe) = P(x*,k*), 

[Е] 因为 xX* eM 是 原 极 小 化 问题 的 解 ， 由 Kuhn- 
Tucker РЕЯ, FEA, y" 满足 (10.79-0) 式 ， 且 由 
T x°, ХДЕ (10.76), ИНО, А) Є, BEAR 
(10. 7a) (10. 70) RIZ (DLP RT RE 10-9 的 论证 ,可 以 很 容易 得 
到 f(x*)-F(x*, А"). 假设 至 少 d dg (х, A) € N B 
R Р(х, AY-F(xt*, А"), МНН 10-9 中 给 出 的 
Р(х .入 的 表达 式 和 站 的 正定 性 ， 得 到 cr( K*— Х)>12[хт 
Ax—-(x)7 Ax" |-- (x )"A(x—x*). 

HAGO, МЄЛ, Ж Ах+ВТА=—Ь, PEDES 
(10.75) X £i т ЕЕ, В A(x—x*)=B”(X"— А), РД 
c*(4* — 4) 77 (X*)"B*(A* — A FECLO. Ta )RICLO. 16) S RZ FR. 
到 这 个 不 等 式 ДН (C 0T A0. ELT Ye2p0 ,至少 有 和 的 一 个 
ЕДЕМ. ВЯ, ЗИ EGO. ЛЕМ, М 


Е F(x*, \*) = max „РО, А). 

10-11 证 明 ; m3 Qt, АЕМ ВАА Е, Н 
АТ, хан. 

[证 ] zx Amd Lagrange Ш, ÈE 
(F Axt età ) 十 PFCAx 十 BrX 十 b) 十 97X, 其 中 和 9 是 
_、 工 agrange 乘 予 向 量 , 则 关于 对 个 问题 的 外 aho-Tucker 条 作 
HX 
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—Ax*-FAp*-0 ` (10.33a) 


Вр*--9*=с (10.335) 
Ах Вт += —b (10.33с) 
(^*, 9%) =0 (10.339) 
А*, q*z0 (10.33e) 


因为 入 是 正定 的 ， 从 (10.330) 式 得 到 xX*=p*。 用 Xe 代替 
(10.336) X fff p*, 重 新 命名 四 二 六, 我 们 观察 到 (10.335)~ 
(10.33e) 3 55(10.7a-d) АЕ, Br PL Bi K uhin-Tucker 
Е, x* 是 原 问题 的 解 ， 


пя E 


10-12 HRAM Нл Ахь, х,20, xi Tx, «3, 
24,—xX,«4 fl x,«2 所 确定 ， 目标 函数 是 Ax) 二 (1/2)x"A、 
十 Bzx， 其 中 
17 


1J 


FiTheil #1 Van de Panne 52 f(x) XEM Ett А. 
10-13 用 Hildreth#l D’ Espo H iR Ei 10-12, 
19-14 H Houthakker EZ SES м 10-12. 

10-15 用 Wolf 的 修正 单纯 形 法 解 问题 10-12. 


b-[—i5, —7]? 和 Ñ 
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STE 整数 规划 


在 前 面 几 童 中 ,我 们 已 经 讨论 了 无 约束 问题 和 约束 问题 
的 最 优化 方法 ， 其 中 所 有 变量 都 假设 是 实 值 变量 。 本 章 我们 
考虑 一 类 最 优 问题 ， 其 中 至 少 有 一 些 变 量 限 制 为 整 信 变 量 ， 
当 一 个 变量 是 整 值 时 ， 它 不 能 再 用 无 穷 小 增 量 如 以 改变 ， 内 
Ж, ЖЁБ { ЛЕШ ЖЕШ ЕЖЕТ. 

整数 约束 能 被 应 用 于 任何 最 优化 问题 ， 所 以 我 们 有 线性 
整数 规划 和 非 线性 整数 规划 ， 如 果 一 些 变量 允许 取 非 整 值 ， 
出 我 们 得 到 混合 整 教规 划 。 由 于 获得 非 线 性 规划 问题 的 整 至 
解 的 方法 相对 来 说 为 数 不 多 ,所 以 在 这 一 章 中 ,将 注意 力 限 制 
在 整数 和 混合 整数 线性 规划 。 在 下 面 的 例子 中 ， 将 提出 这 类 
ЛЕ, ЕН, ЖИЕ ДЕ Ж ЖОЕ ЕТЕП 
МЕ. 

piu (背包 问题 ) 令 S$={1，*…， 计 ) 表 示 一 组 物体 、 
Rp iBEE о, 单位 ， 价 值 v4 单位 。 问 题 是 把 集合 S 中 
的 物件 装 进 背 包 ， 使 得 它 里 面 竟 总 价值 极 大 而 总 重 不 超过 给 
定 的 上 界 。 我 们 想 把 这 问题 提成 整数 规划 问题 ， 

(W) ФИКРИЮ ЕЯ, 定义 变 基 x;， 如 困 第 
í 项 被 选中 ， 则 * i, XR x4 二 0。 现 在 可 以 将 问题 叙述 . 
TT. 


м 
тах > хе; 
4 ЕТ 
м 
且 使 su, <W 
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Jhon, HEFER i ISSM, x EAER. 
由 于 a, 对 所 有 (Lic M) ERES, ПЕ Т Л ЖОЙ 
NES, EË, UG 对 所 有 КОМНИН, WAN 
得 到 一 个 标准 的 线性 规划 问题 。 

例 11-2 《旅行 推销 员 问 题 ] 考 号 一 个 旅行 推销 员 ， 介 起 
АО Не Nl Айй, НХ N АЗИЙ 
的 回路 周游 路 线 ， 经 过 每 个 城市 是 只 经 过 一 次 ， 并 使 费用 最 
省 。 试 把 这 个 问题 提成 整数 规划 问题 。 

(SO 令 cyy 表示 从 城市 ; 到 城市 ТИНИ 费用 。 引 进 
Я хос, ПНА: HAIRY j, M x =1, 
否则 xiy 一 0。 不 失 一 般 性 ， 我 们 假设 推销 员 从 城市 O 开始 。 
现在 把 吝 信 变量 <, 满足 的 约束 用 式 子 表 述 出 来 、 由 于 每 个 
城市 在 闭路 周游 中 必须 访问 一 次 ， 我 们 四 到 ， 对 于 每 个 J, 
DPE pij, Hx,,2130 x,,-0(pz5)), iX 46 
价 子 下 列 约 来 

eami ЖИ Л, ij 
注意 到 旅行 推销 员 必定 离开 每 个 城市 一 次 ， 用 类 似 的 做 法 得 
到 


н 
Ay "Ld HEIEN, EJ 


对 变量 x, 的 这 些 约束 保证 推销 员 从 城市 QO 开始 到 3k h N 
结束 他 的 旅程 ， 于 是 我 们 得 到 一 个 开路 周游 ,. 而 不 是 回路 周 
游 。 但 有 是。 每 个 回路 周游 间 题 可 以 转化 为 一 个 F ЈА 
炊 。 我 们 引进 一 个 人 为 的 焉 市 ， 比 如 说 城市 入 ,使 Con 二 0: 
并 对 所 有 六 有 Coy 一 Cnwy。 这 就 意味 着 在 开路 А 游 中 的 最 
后 的 城 亩 与 第 一 个 城市 是 相同 的， 从 而 我 们 得 到 了 回路 局 
游 ,迄今 我 们 引进 的 约束 保证 推销 员 访 问 每 个 起 市 一 次 , 且 仅 
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ж-ж, 并且 从 城市 0 开始 和 结束 其 旅程 于 城市 0。 但 是 这 
些 约束 并 不 排除 有 可 能 得 到 多 二 一 个 的 不 вания 
D Шов М: 个 城市 组 成 单一 同 路 周 游 。 为 防 出 
弄 砚 多 个 不 硼 重 登 的 回路 周 涉 ， 我 们 将 每 个 城市 了 联系 一 个 
实数 ус, Oc y. N ТИЛЕТ ЯТ, 

vicy tN М1; М, 1600, 

2} 
为 子 盟 所 这 最 后 的 一 组 约束 排斥 了 任何 不 相 重 等 的 回路 周 
游 ， 我 们 考 虚 由 点 个 城市 组 成 的 这 样 一 个 部 分 周游 ， 对 于 加 
路 中 每 个 城市 ， "xai, 在 回路 里 共有 x, 189 БЕ 
НЯ Ежа, наи Нин 
些 不 等 式 加 起 来 时 ， 差 уу, 彼此 对 消 ， 我 们 得 МЕС 
(太一 1) 和 A， 这 是 一 沾 予 盾 。 所 以 最 后 一 组 约束 将 排除 任何 部 
А, - 

现在 旅行 推销 员 问 题 变 为 家 小 化 周游 费用 ， 此 费用 定妆 


为 
љ-1. F 


> X 6,41, 


+=@ фа 


其 中 变量 x, пены, НЕЕ ДИНИ, DRAH 
H N: 个， 这 使 得 当 并 取 值 很 天时， 旅行 推销 员 问 题 的 整 值 
解 就 很 礁 求 了 ， 

例 1123 《〈 分 配 问题 ) 考 虑 一 个 电子 设备 工厂 主 ， 他 的 公 
司 有 N 个 不 同 电 子 亲 置 的 定货 单 、 公 司 雇用 了 M 个 人 ， 他 
ПЛЕН, ИЕ 
ЕН ER. ВНЕ AERAN 
问题 ， 
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示 第 ;雇员 制造 第 j 类 装置 的 数目 ，2， 表示 гая 
产 第 j 类 装置 所 需 的 时 间 。 于 是 标准 的 分 配 问题 是 求 

Зав ИЖ Ё зу, joi, 56, N 下 的 极 小 。 
注意 由 于 定义 ,对 所 有 的 和 了 变量 xy， 必须 是 非 负 的 整数 。 


一 、 截 断 和 侈 入 


| 在 崎 面 上 似乎 可 能 把 整数 线性 规划 作为 一 个 一 般 的 线性 
规划 来 处 理 ， 似 平 可 能 用 标准 的 单纯 形 法 来 求解 。 而 为 了 得 
到 整数 解 ， 必 须 截断 或 会 入 由 单纯 形 法 得 到 的 解 。 不 幸 的 是 
这 种 简单 的 过 程 不 可 能 提 殿 一 个 整数 解 ， 如 图 11-1 rz, 
ЖЕН 11-1 中 ， 粗 面 点 弄 示 划 数 线 注 规 划 问 题 的 可 行 解 。 
x* 表 示 标 准 的 线性 规划 的 最 优 解 。 如 到 对 x* Е, 得 
Xi, {Вахан бин М, P 实 上 xs? 是 整 
数 线性 规划 的 最 优 解 。 如 果 对 хе 作 会 入 ， 得 到 Xx*， 它 其 
至 个 是 一 个 可 行 解 。 因 此 截断 和 傅 入 这 种 简单 的 办 法 不 被 引 


E 11-1 
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Я, 除非 有 某 种 简单 方法 来 检验 最 后 解 的 精确 度 。 但 是 当 最 
优 解 对 于 加 上 或 减 一 个 单位 这 种 变化 不 敏感 时 ， 即 当 解 是 很 
大 的 数 时 ， 常 常 采用 这 些 方法 。 


二 、 分 支 估 界 法 


分 支 估 界 法 特别 送 宣 于 解 整数 规划 问题 。 读 方法 利用 了 
解 树 的 袍 金 ， 它 被 定义 为 包括 所 有 结 点 和 分 支 的 图 ， 这 里 结 
点 表示 所 有 可 行 解 集合 的 一 个 子 集 ， 分 次 是 连接 任意 两 结 点 
的 有 向 线段 。 下 面 的 例子 里 ,我 们 对 分 写 问 题 导出 解 树 。 

pili 设想 有 三 个 强风 计 划 抢 莹 银行。 这 里 包括 三 件 
工作 ，(1) 加 岗 逃跑 用 汽车 ，(2》 搜 集 金 钱 ,(3) 提供 掩护 。 
每 个 强盗 都 能 指定 做 三 件 工 作 中 的 任何 一 个 。 我 们 的 问题 是 


Е АРАГ F| BE AREE RU 

(W) 我 们 引进 变量 х, (x, 33. ЧЕ: 
盗贼 被 分 派 做 第 了 项 工作 ， 则 x, + 王 1， 和 将 则 2 一 0。 解 树 

为 图 11-2 所 示 。 其 中 每 个 结 点 上 均 有 统一 的 编号 。 树 的 构 

造 撒 述 如 下 ， 

л 0 是 所 有 可 能 分 配 的 集 含 。 结 点 1 是 盗 且 1 Ad 
做 第 1 项 工作 时 所 有 可 能 分 配 的 集合 .类 仆 的 解释 可 应 用 于 
$554 230 3. Hia 4 Xs ER 1 被 指定 做 第 1 项 工作 和 盗贼 2 
做 第 3 项 工作 时 所 有 分 配 的 集合 。 ЗЛА ЕТЕУ I тая 
5519. Ба ЖИ ОЕ Пою, ИН, 
3 分 别 指派 做 第 1.2.3 WIE. 类 似 的 解 嫩 可 应 用 Tisa 5 
11 €i 15, 

现在 考虑 函数 极 小 化 问题 ， 我 们 可 以 利用 如 在 例 11-4 中 
讨论 的 解 树 求 得 极 小 解 。 一 个 方法 是 计算 每 个 未 端 结 点 的 函 
数 秆 而 后 交 接 视察 米 得 到 极 小 解 。 但 是 这 个 方法 次 求 找 电 所 
有 癌 能 的 下 于 末端 结 点 的 分 支 序列 。 这 对 会 有 大 量变 数 的 问 
题 来 说 是 一 个 艰难 的 工作 。 分 支 估 界 法 通过 使 用 一 种 判别 米 
ВТ, АПР ЗНАЯ МИЛИ T TF 
Е, 这 样 就 简化 了 这 个 任务 。 

ЖЕ Е КМЕЖ- м. БИЯ, ЕВЕ 
点 的 可 行 解 ,并 计算 从 这 点 的 目 探 函数 УСН, ИЯ ЛЬ. 
在 假定 将 第 点 进一步 细 分 成 其 他 的 结 点 ， 它 们 中 包括 结 点 
p, ИЯ f(x) 在 结 点 了 所 含 的 所 有 可 行 解 的 集合 上 的 下 界 ， 
并 以 f9 表示 之 。 得 到 这 种 下 界 的 方法 依赖 于 所 考虑 的 问题 。 
但 是 ， 如 果 faf, WEAR p 结 点 出 发 的 解 罕 中 ,没有 一 
条 路 线 能 导致 比 f, Ehh MRE E, E A ER, 
避 除 掉 树 中 所 有 这 样 的 路 线 ， 直 到 我 们 达到 这 样 一 步 ， 使 更 
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行 考虑 的 所 有 结 点 4 都 有 ар НЕ, 24 38 去 法 使 获 
得 极 小 解 所 作 的 探索 得 以 节省 。 
例 11-5 (ЖЕНИ ИЕ РНЕ ЕН 
FRIRE 
—2X,4-3x5222.3 
x ji 2x,=z8 
Ж а, х,20. RAER xix. НИЛ, XXH ox. 和 xs 
B E C. ЖЕК SE t. 
(№) 所 有 可 行 解 的 集合 用 图 11-3 ЧЕ Ж ЕВЕ 
示 ， 其 中 粗 贺 点 表示 整 可 行 解 。 函 数 fos, +4x, 的 两 条 
等 值 线 也 在 图 中 表示 出 来， 至 然 f(X)dE x,—4, x,—2 处 取 
得 最 大 值 12。 我 们 将 全 部 可 行 解 的 集合 (不 考虑 整数 约束 ) 表 
示 为 分 支 估 界 法 中 的 缚 点 0， 并 人 慌 助 于 简单 图 形 的 分 析 来 证 
ЗЕ ОЕ x T2. 530 хс 0 TAS BC IS 42( LE E18), 
KaT хі ЖЕШ, АПН d uim 
2, 如 图 11-4 Bim. р 


Ys 


-22, +3x =3 


图 11-3 


到 为 “一 2.7， 得 到 结论 为 最 优 整数 解 将 满足 或 m3 
. 801 + 


0 
-2Хх,+$ xx 
x,42 x; <Ë 
хуу X120 


B 1—4 


д.52, 所 以 通过 把 约束 х„>3 附加 到 确定 结 点 站 的 约 来 
Е, ERESI, JEHA из пан, идя, 
M, нем 是 所 有 可 行 解 的 集合 。 

我 们 通过 把 约束 ко 附加 到 确定 结 点 0 的 约束 上 ， 得 
到 结 点 2 ， 所 以 结 点 2 包括 了 图 11-9 中 所 示 黑 影 区 域内 所 
有 可 行 解 。 从 图 上 我 们 证 dc f(x) XE х,=4 和 xs 一 2 处 取得 
BAWI, 

在 缚 点 2 中 得 到 的 最 优 解 是 蓝 值 的 ， 且 进一步 细 分 结 点 
2 只 能 得 到 莫 小 的 函数 值 。 所 以 我 们 得 到 的 结论 是 ， 结 点 2 
浊 供 了 求 最 大 问题 的 解 。 注 意 ， 如 果 我 们 伟人 xf Ма, 
们 得 х. 一 3 和 Ya 一 3， 它 不 是 可 行 解 。 截 断 则 得 % 一 2 和 
х,=2, ERREKREO, ЖИМ. 

8911-6 《混合 整数 线性 规划 ) ЖЕЛЕ 11-5 中 的 问 
是 ,只 要 求 *, AREA Fo ЖЕЛЕ ИШНИ ЖШШЕ 
gm. 
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CO ЖШ 11-5 中 的 情况 ， 我们 从 结 点 0 开始 , 得 
到 x1-—2.58 和 xs 一 2.71。 因 为 只 要 求 x, 是 整 值 ， 用 于 列 . 
方式 我 们 得 到 结 点 1 和 2， 

结 点 1 ЕН x12 附加 到 确定 结 点 0 上 而 得 到 的 。 
ЖЕЕ, ЈО) Æ x 2780 x,—2.34 hh ik X RUE 
11,36, 

结 点 2 RB x23 附加 到 确定 结 点 0 上 而 得 到 的 ， 
AARLE, JOE x,—3 和 xs 一 2.5 处 达到 最 大 值 13。 

ЖЕ д НУН 1 更 优 的 函数 信 ， 所 以 最 太 解 由 
X,:3 和 x,7-2.5 £518, 


=. ШВА 


如 图 11-1 中 所 示 , 整 线性 规划 最 优 解 很 可 能 是 所 有 可 行 
解 集合 的 一 个 内 点 。 所 以 像 单纯 形 法 那样 只 探索 这 集合 极点 
Ш КЕНЕ, ,是 
НЗРТ, ЕВ В (tome 
ВАТ К, ЭЛЕН mte HJ i # ЗЕЕ 
E. НЕЗА АА, ЖШ {ТАНАТ 
Gomory 的 方法 。 

现在 考虑 线性 规划 的 一 般 问 题 ， 并 添加 要 求 变量 是 整 值 
的 。 为 了 解 这 种 整数 线性 规划 问题 ， 首 先 不 管 整数 约束 ， 用 
单纯 形 法 解 线性 规划 问题 ,如 果 最 优 解 是 整 值 , 则 完成 求解 ， 
否则 ， 引 进 一 个 新 的 约束 起 平面 ， 使 原 有 的 可 行 解 集合 缩 
小 。 

为 了 在 解 整 数 线性 规划 时 有 好 的 效率 ， 新 的 药 束 超 平面 
应 当 具 有 两 条 性 质 。 首 先 ， 在 得 到 新 的 可 行 解 集合 时 不 能 对 
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TRIES SR АЕ ти, RR, N BR S FR] EUR 
的 最 优 解 成 为 不 可 行 的 。 紧 接着 我 们 在 新 前 可 行 解 集合 上 用 
ЖЕНЕН, НАП ТАЕ ЕЕ ЯТА НУ, ПАЎ 
RE, ЗЕЯ КАЈА КЫШ, ЭРНЯНФ EAE 
再 。 现 在 我 们 讲 如 何 选 择 这 些 附 加 起 平面 的 问题 。 
TERT ЕЕ 

mu ©, У 
其 中 

Y-iyyc E"**, By—b, yz) 


mH be E", b>0 UE ВЕ тх (път) ЖИ, 方程 By 一 bb 
也 可 以 写作 | I 
bi iy io bauen Yara =b, 
: : : (11.1) 
bui teet Emmis Yai a= bm 
UE man ЖАШ 31, 78, Yan f m A EE ICD E, 
我 们 可 以 随 音 地 置 mn ТКАНИ Ж п т, EDU I 
下 的 tm 个 变量 求解 (11.1) 式 ,不 失 一 般 性 , АПУ, = 
"= =0, RA 1.1), WRA Eb =b у, +=, 
Bar)”, J51, =+, mE Е” 中 的 基 ， 风 得 yí, ‘чу, № 
МЯ, ПЯ y,220. j=l m, ПЖ. ЗН 
Жл ЖЕРИЙ. у, 为 基本 变 恒 ,现在 问题 是 求 C11.1) 式 的 
(су) WERTH. 
$ y* -EQ? 07, (ужа КИНИ ТЕЛЬ 
ЖА, BUB y! Ane k Kam, y!-0. ПЕНЕЙ 
B AAA В=ГВ 84], Xr B, 的 列 向 量 对 应 Ру! 中 КЕ 
REE, HA B. HAREAK E" HRE, MAB, 有 道 ， 


«$10 = 


根据 By=b, E y! Bib Br By, MÆ ve Bb 和 
v1-B;i!'b!', Hip b? dg В, 的 第 了 列 回 量 ， 得 到 
угу 一 Z yv: (11.2) 
{= 


dp у! 的 每 个 分 量 都 是 整数 ， 风 得 到 хД. РОТЕ 
Ey TERR, ШН.) 


ув ЗУНР (11.3) 


ші яў} ДЕ о: Dd S RP ВСВ BED w 10 
#R0<01<1, (1.3) 式 可 以 写 为 


ы! wg- $ yjut)s(et— 53900) (11.4) 


现在 如 果 我 们 希望 ур 是 整数 ， 则 由 (11,4) АЕ, yy>0 
至 少 对 一 个 成立, 因 X y101>0 Moco, IER 


п 
a- 2 y501=<0 f (11.5) 
ы 1 


А yi 取得 整 值 ， 当 方程 (11,5 式 是 紧 约 束 对 ， 它 臣 定 
一 超 平面 ， 我 们 把 它 作为 新 约束 引入 到 原来 的 线性 规划 问题 
中 。 读 约束 因此 方法 提出 者 而 得 各 ， 称 为 Gomory ЯМ. [9 
JUGERA NUS BUB j Ж y1—0,3x BUR UR EUR CIT 5) А, Br 
РАМН ЖЕН ТЕЗЕ ЖНГ ТЇ. ВЕ, RERIT E 
AR, OK BERE BUB Е ИЯ Е C11. 5) A. 

例 11-7 考虑 整数 线性 规划 问题 ， 其 中 所 有 可 行 解 的 集 
d. ЖЕЖ х, 4120, z,<3, 2X, Hre AR ху 和 ха 
是 整 值 来 确定 。 我 们 希望 借助 于 割 平 面 法 求 得 最 优 解 ， 其 中 
目标 函数 是 f(x, x)=, 2x, 

(NO НЫЕ! DUNG Sm. 图 还 显示 已 
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ЖАН, ЛАРА ЕВЕ, Иа SO, — 
317 。 把 崖 平面 法 应 用 到 该 问题 ， 使 用 2 和 ws 作为 А 
Е, 不等式 约束 可 写 为 | 

Ox, Tx +: =3 

2x м, + и = 6 
F rR Xi. Ха, пу, 20, @ b—[3, 6)T, y=[x,, Xie 


ші, ШТП 
1 
B= ° 1 "| 
` 2 1 ü 1 


Виа), АВНЕ 
у*=(1.5, 3, 0, 0)", ЖЮ EA E E E x, x, y!= 
(1.5, 307 和 基本 间 量 是 bl 一 [00，2]7 和 bs 一 [1，I]7。 所 
以 | 


Xi E НЯ Ну =8,16-—[1.5, 3]7, vš=Br!bš = 


[-4 F. 各 v 一 Bitb! 一 | 诗 ，9 | 。 这样 (11.2) 式 变 


I ` 1 
xil. 1.5] о | gx 
in Ls] я HJ |] 
Шу} ЖЕ, BERI, (11.4)-(11. 5) АЖ 
sisit (Уру) (11.8) 
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其 中 wy 和 yi AATA y АЕ EIS EG ya=3—x > 
和 y2128—2x,—x,, dECIL.06) X ур 和 v xum ge 
ER, ЖШ РН oxi. НУ ED x =1 截 掉 一 部 分 可 行 
dk. WE 11-8 К, fi 88, 3 x s<1 作为 新 - 
约束 引进 时 ， 旧 约束 2x1 十 XX; 所 6 是 多 余 的 。 

现在 新 线性 规划 问题 是 在 出 0X*1 扩 1 M KRR E 
的 集合 上 求 maxf(%1 хо), +25. НИЯ 形 法 ,我 们 
得 到 这 阿 题 的 最 优 解 x* 二 [1，3)”， 它 也 是 整数 线性 规划 和 疗 
题 的 最 优 解 。 


习题 与 题解 


111 СЕНЯ) ЖЕЯ 1-1 中 引进 的 分 配 问 题 , 候 
RB ЛЕНЕ: 项 工作 时 的 效率 为 е3. ЖЛЕ f RE 
HERE- BILE ARCU SS АЖЕК. 

С) 假定 单独 一 件 工 作 的 效率 用 он, ТВОЕ 
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- 量 。 为 方便 起 见 ， 把 数 ety 排列 成 矩阵 的 形式 


[ 0.7 0.3 0.44 
Е= 0.5 0.3 0.6 
0.2 0.6 0.4 
МЈ ЖН (Ег, ЛОШЕ Е 的 第 ji 行 和 第 了 列 ， 
-现在 定义 集合 
I= {i Е 的 行 i 在 结 点 名 未 被 删 去 》 
Ts= ПЕ 821 j ERA RREME? 
B,-i(, D| E 的 行 i Ју ТЕЗЕ ЛА А ЖП), 
则 在 结 点 В, Ж В, 表示 已 经 作出 的 部 分 分 配 ， 这 种 分 配 
ВИЖУ Ее, Я ТАНЯ E 为 以 最 大 效率 做 


-每 项 工作 时 各 项 工作 的 效率 总 和 ， 也 就 是 T (maxe,,). Ы 
k Р 
因此， 总 效率 移 上 界 为 


e |= X g, + (maxe 11.7 
* (r es, ет, (шал cs) ( ) 
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利用 图 11- 4 Аа, ВУЛКАН, TE 
首先 可 以 得 到 总 效率 最 大 值 的 一 个 下 界 。 这 个 下 界 是 根据 分 
BE xi = Zr = =l 来 计算 的 ， 得 到 一 0.7 十 0.3 十 0.4 一 - 
1.4, 

在 图 11~2 中 的 结 点 1 处 ,总 效率 的 上 春 由 (11.7] 式 可 得 ， 
Яе, =0.1+щах(0.3, 0.0)--max(0.6, 0.4)—1.9, ев. 
the X, MAMA E ELT 4415; 由 (11.7) 式 ,有 
е. =0.7+0.3+шах(0.4)=1.4, Не, 不 大 于 e， 我 们 同 到 
т, ， 并 前 进 到 结 点 6。 由 (1.7) 式 ， ew 二 0.7 十 0.6 十 
шах(0,8) 1.9, Не, K Te, ИВЛ 结 点 5 得 结 点 
11. 根据 (11.7) 式 , 811 二 1.9; 义 因 结 点 11 是 末端 结 点 ,总 . 
效率 由 于 芬 配 x, 1 二 X81 二 X28 二 1， 而 诗 少 是 1.9， 所 以 我 
们 置 e 一 1 ,9。 

现在 结 点 2 bk е, =0,5 + тах(0.3,0.4) + шах 
(0.6, 0.4) =0.5+0.4+0.6= 1.5, Ме. А е=1.9, Ж 
不 必 对 结 点 2 进一步 细 分 

在 结 点 3 处 ,利用 (11.7) 式 ， 有 es 一 0.2 十 max(0,3， 
0.4) -пах(0.3,0.6) =0.2+0.4+0.6=1.2; XE e P 
e=1.9, ЮЛ: 338 —:20 8829, МУЛЬТ. 
ОВТ ЕН), РНЕ А ЛУ № ДЖ xim 
X= =l, ROB E CHE 1.908 85). ТЯ 树 如 图 ，. 
11-? 所 示 。 

11-2 考虑 从 日 本 运 到 美国 750 辆 汽车 的 问题 ,假定 有 
”三 种 类 型 移 稻 可 供 使 用 ， 它 们 上 其 有 如 下 特性 ， 

可 种 用 的 燃料 总 额 是 5500 加 合 ， 可 和 和 用 的 海员 总 数 是 90, 


”从 类 型 1 的 每 条 船 赢利 2000 美元 ,从 类 型 2 每 条 船 赢利 1000 


За. АУЕ ЕЈ. АНАКИН, Жии 
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| WEBS у 200 — | 100 


НОЕ T 1200 | 190 
ERES ” о 25 | . 10 
- I 
使 用 的 每 种 类 型 的 船 数 。 


(WO — x, 和 ss 分别 表示 类 型 1 12 НЕ, ПЖ, 
和 xs ЯДНА Ву, LRA RTLH 
200x, 100x2750 
12005, +7004,55500 
25x4-H-10x,-00 
Xi, X570, 1, 2, = 
ЭЕ КЕРН АЖ (ху, x.) 20002, +1000%:. ЕЛ 
许 xi uc, ЭМА КОХ НТ, Перри 
规划 ， 得 到 x,251.45, х.=5.4, ЖЯ) 润 8300 美元 。 图 
H-E Т Ж, Ed E8458 0 表示 上 述 异 形 。 现 在 通过 分 
SARRE xp x2, DR 038 д ИЕ à 1382. 
对 结 点 HRA BRER ху, x.—6.15, ЖННЯ 
3150 л.. НЕНИЯ x92, za=4, МШЗ 8000 
AX, Ма, 和 x; 是 整 什 的， 我 们 不 需 进 一 步 细 和 分 结 点 2。 
在 结 点 1 所 得 利润 比 结 点 2 多， 所 以 加 履 11-8 中 所 示 ， 
мІ 3 84 Ez НИЕ Хх, =1,5,=6, 
利润 为 8000 美元 。 在 结 点 3 dde ЖЕ, =0.5, x,—7, 
利润 8000 美元 。 结 点 4 和 3 的 进一步 细 分 仅 能 得 НЯ 
H, Dr ÑISPA FESHER, H х2, хї= 4 їлї= 1, 
рб, 在 两 种 情形 中 的 任何 一 种 ， 利 润 都 为 8000 美元 ， 


“3t6， 


ET 11-7 


11-5 СВЕН FEARTA Am, E 
Ан SERI ME, 


зак | = E | H k 


1 18 27 
z 12 a 
3 35 30 
4 16 18 
5 | 13 6.5 


Нери ивы, GIT K. TALES ECTS 
过 45 单 位 。 | 

(Wl ТРА Sp bh Dy E Et Br Fi БВ ИНА ЗЛЕ pr 28: 
物品 排列 如 下 ， 


* 517 = 


00 x, *100 2, 22750 
1200, 190 X «25500 
25 x, + 10 x: 290 
x -1.45,x,^2 5.4 
$8300 


Bi 11-8 
—————— —— — — Í—Ü' 
ня HRAS | x x | 价位 оши 
1 | 3 | 15 30 2 
2 | 1 18 27 1.5 
3 4 16 18 1 
4 2 12 9 0.75 
5 5 15 8.5 0.8 
t 


dudum E pA BAS DU tT AR ЗЫ, 
CGU RES EJE, о S| Ú nr ike 
mmm. ЗЕЕ, 则 开始 把 编号 为 1 的 物品 
ЖАШ, БТ ДҮ ЖЕНИ ИНА, ДЖЕНК 
一 过 程 ， 则 背包 内 将 装 有 物品 3 和 1 的 全 部 ， 加 上 物品 4 的 
3, НЕКИЕ. ИВАНЕ 5+16 
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+2016) = 46% #10-27-+-2 (16) 693 f 

因 物 品 是 不 可 分 割 的 ， 上 述 的 解答 无 效 。 但 是 我 们 可 以 
继续 从 上 表 顶 上 开始 取 和 物品， 直到 未 再 有 不 可 分 割 的 物品 能 
放 入 而 又 不 超过 重量 极限 为 上 ， 这 手续 使 得 放 人 的 是 全 部 物 - 
号 3 和 1， 总 重量 和 价值 分 别 为 ,33 和 57 单 忆 。 显 然 这 个 解 
趟 是 最 优 的 ,因为 全 部 物品 3 ，1 和 2 的 组 合 使 总 重量 和 价 
值 分 别 为 45 和 66 单位 。 还 要 指出 ， 共 有 极限 总 重量 的 性 倒 
组 合 的 价 信 ， 当 人 允许 分 基 物品 时 总 是 还 能 增加 的 。 

11-8 表示 这 问题 用 分 支 估 界 法 建立 n B EH. ТЕ 
ЖА, NEG, р, ROW 结 点 表示 包含 指标 i 和 了 而 不 
包 食 指标 羡 的 物品 所 有 可 能 的 组 合 。 ВОЕН ЕЯ УНД 
允许 物品 可 分 割 性 来 计算 . 

ERI 包括 除 指标 I 外 的 物品 所 有 可 能 的 组 合 ， 对 结 虚 
1 上 界 六 的 计算 表示 如 下 ， 


指标 号 LH . E X * w 


如 果 取 编号 为 1 和 4 的 物品 全 部 和 编导 2 ios LL RU 
包 总 重量 为 18 十 16 十 -7 (12)= 45 单 位 ,相应 价值 为 一 27 十 
i63) 51.2584, 


B-D Wu 2 表示 包括 指标 1 在 内 的 物品 的 所 有 可 
能 的 组 合 ， 对 结 点 2 的 上 界 的 计算 列表 如 下 ; 
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图 11-9 
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如 果 取 全 部 物品 '3 和 1 ， 以 及 构 品 《的 4， 则 背包 总 电量 为 


15 十 18 十 了 (16) 一 45 单 位 ， 祖 应 价值 为 了 一 区 十 27 十 -二 (16) 
一 69 单 位 。 

因 在 结 点 2 总 价 信 上 界 太 于 结 点 1 ， 我 们 细 分 结 点 2 为 
BASMA, жин, HAN 有 较 高 的 上 界 ， 再 细 分 结 点 
4 为 结 点 5 和 6 。 结 点 6 训 示 的 是 不 容许 的 物品 组 合 ， 因 它 
тшшн. FERTA 6 ШҮУ=—оо, Hab 
жн 03010, над 9 提供 了 已 知 物品 的 最 优 


组 合 ， | | | 
11-4 ZEMA 11-10 中 所 示 的 旅行 推销 员 向 题 。 在 这 
Ан, д. В. ALD 表 示 四 城市 ， 紧 换 着 连结 每 对 城市 
的 线 的 数字 表示 在 这 两 城市 间 旅 行 所 需要 的 时 间 。 求 回路 局 
游 城市 的 最 短 时 间 。 
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(REO ЖЕ 11-10 中 缩 出 的 时 间 数 据 以 矩阵 T, 的 形式 
表示 如 下 。 


* 321 = 


А, 107 n 
В 2 107 1 1 
T,= | 
C 1 1 107 2| 
DN 1 1 2 107 


在 和 矩阵 Ti, 中， АН ВЯ ЕЖ 2 给 出 了 从 城市 4 到 城市 
妃 所 需 的 时 间 ， 在 T: 内 的 其 他 元 卉 可 用 类 似 的 方 АЕ. . 
在 Ti 的 所 有 对 角 元 素 取 成 很 大 的 数 107 ,为 的 是 排除 诸如 从 
BE 8 城 的 显然 不 必要 的 旅行 。 

现在 如 果 从 矩阵 Ti 的 第 i 行 的 每 个 元 过 里 NETS 
数 ， 则 实际 上 是 把 从 城市 i 旅行 到 其 他 每 个 城市 的 时 间 减 少 
了 那个 常数 信 。 我 们 称 此 运算 为 行 简化 。 业 似 地 可 以 定义 列 
简化 运算 。 显然 行 或 列 简化 都 不 改变 最 优 回 路 周游 ,尽管 旅 
行 时 间 按 篇 化 矩阵 Ti 所 使 用 的 基 而 减 小 了 。 

现在 将 矩阵 T, 每 行 碱 去 1 ， 所 以 减 去 的 总 量 为 4。 所 
得 简化 和 矩阵 Ts 为 

A RC D 
А1071 0 0 

1 10:609 о | 

о 0 10' 1 | 
рхо o 1 107/ 


HERT 的 元 索 一 样 说 明 T， МЛЯ, HEA м EA 
таг, Аат 4 xp C Р ИТЕ У РАТ 4 到 
. 召 。 类 似 的 结论 可 从 Ts 的 其 他 各 行 中 作出 。 因 在 Ts 的 每 行 
每 列 都 至 少 有 一 个 零 ， 我 们 能 形成 费时 为 零 的 回路 让 游 ， 一 
Жемал А, C. B. D. А, EL EUR DEREN IRE 
个 非 负 的 重 , HURRA, C. B. D. Айй. BERD 
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Т, = 


E [B ВУЗЕ БИА AE AE, THS РЕНИ, EREE. ` 
在 有 些 情 形 ， 通 过 简化 过 程 在 简化 短 阵 时 产生 的 零 的 分 
布 方式 ， 不 多 许 形成 零 时 间 的 回路 周游 。 在 这 种 情况 下 ， 简 
单 的 简化 过 程 不 产生 最 优 解 。 
11-5 ЖИНА, АНЖЕ С, 表示 在 城市 


REGES W H 
A BC D 


Ar15 3 8 
_ В] 4 105 1 


ud 2 5 1052. 
pli з 4 0) 
求 费 用 最 小 的 回路 辕 游 路 线 。 


[Wl НЯ А. В. С, БА 2. 1. 2, 1, 
jr B3» B 1 С ЛУ BRA 2501, ЕЯ 24-142 
十 1 十 2 十 1 二 9 单位 之 后 ,简化 矩阵 为 


A В С D 

A 107 1 0 1 

B| 3 1074 D 
С,= 

Со 1 107 0 

Ро o 23 10! 


LE С, 中 每 行 每 列 都 至 少 有 一 个 零 ， 但 仍 永 能 构成 费用 为 
零 狗 回路 周游 。 所 以 费用 最 小 的 回路 局 游 的 JN 必定 大 于 
3. ЕЕ 11-11 中 ,我 们 构成 由 所 有 城市 组 成 的 结 点 0 在 
费用 上 已 知 9 STUXS—TFAOLB.) 

现在 将 路 线 AC 排除 在 考虑 之 外 构成 结 点 ! ， 这 在 图 形 
中 用 АС 表示 。 因 路 线 AC 被 排除 ,必须 从 城市 4 到 某 个 其 
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Reps ОКЕ С, REER С., ОКН 
小 费用 是 二 单位 由 城市 4 到 城市 В, МОЮ ДЖЕЙ one 
АНТ С; 根据 Cs， 这 样 一 次 旅行 的 最 小 费用 是 2 单 
位 。 这 样 ， 我 们 为 排除 АС 必须 付出 总 额 为 s 单位 的 费用 。 
АІ ТЖ L.B.—9-4-3—12, 

НАНО 为 所 有 包含 路 线 AC 的 回路 ,来 构造 
м2, Н АС 包括 在 回路 中 ， 所 以 可 从 C, ЗВ АС 
列 得 到 | 


A BC D 
Ар = = 
B| 3 07 一 

c 8 1 0 
Со 1 一 0 
Во o 一 1077 


BH 11—11 


э 524 + 


在 Cs 中 每 行 每 列 至 少 育 一 个 零 ， 所 以 行 和 列 的 简化 都 是 个 
43285, БИЯ C, PREAH 0 音 位 后 的 简化 给 阵 ， 
并 县 在 结 点 2 所 有 回路 费用 的 下 办 变 为 二 ,号 ,一 9 于 0 一 9， 

如 图 11-11 所 示 通 进 分 结 点 2 为 结 点 3 和 4 来 重复 上 述 
ПЖ, 并且 算出 相应 的 下 界 为 9 。 结 点 3 和 4 有 相同 的 下 
T, € 对 这 些 结 点 的 任意 -个 细 分 。 ЖЕТА Ята 
444045116, HARGAR Em TA. д5 НЮ 
AO ERAT, 所 以 在 结 点 6 ЖОЕ, EE RATAR 
A, C, B, D, A, XH оцу, 这 可 根据 1 经 过 直接 计 
算得 到 。 


补 хм 


11-5 Hi Gomory SERIE AERE 11-2, 

11-7 用 分 支 估 办 法 解 例 !1-4。 0 

11-8 用 Gomor7 割 平面 法 解 例 11-2， f 

11-09 ЖЕШ ДАИШ. РИА АИС 
市 。 令 Ciy Sos CRUS P ИТИ ЕШ, AERE 
С = [6,527 B 


го 5 4 5 ] 
| 
C 2 0 8 4 
| 3 8 0 3 
. 3 6 0 
А Ж ЖЕ ЖЕЙ И ЖЕ ШИН ESL ИН, 


PUB РО ИНИНИ НЕЕ 1, 3, 4, 2, 1148 
成 。 | 
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11-10 Ий ШЕШШ МБ, НЫНЕ EE 
ЕУ 65 а, 


HE mx | dr & 
1 46 400 
2 10 150 
3 '23 280 
C ， 81 340 
P—— ———————————— M 


11-11 ЯТ 
max(f(xi, х;)=15х, -323,) 
Hj 7x,4-16x,:52 
3x,4-2x,20 
X1, 1220 T 
ЭН х1, х. 是 整数 。 

11-12 HAEHAE, x,)2x 43x; 的 极 大 ， 的 
ЖО: 1.87, 60%, --28 x,« 165, x,220 Н Xi, x+ 是 
idm. 

11-9 用 分 支 估 界 法 解 问题 11-12。 
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第 十 二 章 ”动态 规划 
一 、 多 段 决 策 过 程 


要 态 规 划 号 特别 适用 于 多 段 决 策 过 程 的 一 个 最 优化 方 
Zk, Ех, АЛЯ ВВ. ХЕР 
- 葛 过 程 包 售 三 个 变量 ， 即 阶段 变量 、 状 态 变量 乱 决 策 变 党 。 
.多 自决 策 过 程 帅 含有 这 三 个 变量 的 数学 方程 来 描述 。 阶 段 变 
ЖЕК АН, БЕЛЕК LRE- TEA Е. 
KEREL, ГЕ ЕЕ ЕРИНО ЕЮ 
TERE., Л БЕЛЕ ЕКОН ЕВН, MARP 
ERREN EUER XR ERI TIRE Ж. 

状态 变量 完全 描述 了 在 任意 瞬时 的 决策 过 程 ， 我 们 假设 
ЖЕНЕ ТИКИ, sk 7 YK ЖО 
GR. 决策 变 量 表示 在 一 个 多 段 决 策 过 程 中 采取 的 独立 决策 。 
сни в К ПЫ, АЖ. хх 和 wi 分 
„ӨП А б РЕНА ЕШ ЯЕ Е В, — EBENSO 
РИА: | 

х‘ *! zxg[ xf utt] (12.1) 

EG $=0,1,2,.., gn GI EX K E I. 

状态 向 量 x! 有 如 下 基本 RG. (1) $ Ex lut, M 
ТД: (2) x ЕЁ Т ЖИЕ $ iR tH ПЧ 
жн ИН. 这 个 条 件 意 味 着 对 于 治 " 定 的 x! дшге, 
$&—0,1,2,-- Е ЖЖ ЖАЙ E, ji 部 能 不 用 过 去 的 搞 


" 391^ 


Xx". р< ВЯЛА К. 

TUE RERO EH OARA и", MAER TAB, 
АА ВИЛ Е (12.1) A xt ЖЗ] хе. 由 于 状态 的 这 - 
— 092, ТРЕНУ ЕНК, БЕГЕ PR КЕ BUE E FFE, 
Xt, АННО, ПАИ, ZERRI Е ЕКИН. 
Ну БЕВ р, ЭНА, ВЕРЖИ НЕ, 
按 决 策 者 所 使 用 的 目标 函数 的 尺度 为 最 好 。 

АА-АА, Ext, u МЕН d. 
таз; J (xt, uf, D), НАК Е ВАЗ: [E 
ВЕ ЕВЕ. М 段 过 程 性 能 措 标 的 总 庶 重 由 


A-1 
Y re, ut, i) (12.2) 


Au. d2.D0 X. XHSA- (20, xt Exu, j=0, 1, 
ed BUR. BEA (x* ut itb E x? ful, P0, 
2—1, МЕЖ, ДЕРЕВНИ Е EB (12.2):R E $E, Ве 
nts, N Mu’, j=0, =, М-Н, BIO 
N, ut, s uh Do, RU 


A-1 
J(8,N, uten 0) = Y JO це, д) (12.3) 
. 128 

通常 (хе, uf, МЕНЕ Е ВК E. 
1070ж", N, ut, e, U RAEN А ВОЕН ДА 成 
X. &EUEIDEÉGEGECKJQO, М, v,e, t) X: + НЕ 
SI EE u* ou^"! ПЕ. ЖИЙЕН, ВПАЛ, 

N,u9, e. 7 DXCF ше, еи ЈАЈА. 
这 个 求 航 小 的 问题 ,会 因为 出 更 其 在 x Tute voL F p 
Pyme. xk mp РАН А РЯ К, хе 
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和 uf К ЩТ HARET Ж 
xt c X(1) (12.4) 
ute U(x! ,i) (12.5) 
最 简单 的 约 来 是 形 如 at <ut B! da uf ext cat 的 长 度 约 
Ж. PR41683 REDARE LEET RERE. 
计算 工作 。 


二 、 穷 举 法 


”求解 极 小 阿 填 的 一 个 明显 的 方法 ， 就 是 对 所 有 可 能 采取 
的 决策 序列 (uw?,…,u*"!) 求 成 本 还 妆 的 值 ， 并 出 直接 检查 区 
的 大 小 得 到 最 优 解 。 这 个 方法 称 为 穹 举 潜 ， 它 仅 当 对 二 每 个 
i, UCxt， 科 只 包含 有 限 个 元 素 时 ， 才 是 可 行 的 , W xt e x 
(i) 表 示 第 i 个 瞬时 的 一 个 容 音 状态， 在 方程 {12.1) 中 使 用 ， 
ut e UG, 9, RAAM xt 可 到 达 的 状态 xt 1 的 一 个 有 
限 集合 。 然 后 对 所 有 的 ен е (7-61) ше, RJO, 
u DHR R i 段 的 蕊 本 赠 量 ， 并 把 这 个 结果 加 到 从 xa 8р 
x+ 所 算出 的 成 本 上 ， 从 而 得 到 从 x* 到 达 xs 的 总 成 本 。 
重复 这 个 过 程 直到 ?一 人 一 1。 在 这 -一 过 程 结束 后 ,就 得 到 
Тхе, uh eu) XEERERE u^, ee, uol PE Ж EYE 
Aims. евин, озал B H ШЕ 
5l. 2 3 
8) 12-1 考虑 一 个 多 发 决策 过 程 ， 在 每 个 路 b š i 
状态 志 一 个 数值 变量 x+ 给 定 ， 同 时 数值 决策 变量 41 DZ 有 两 
个 可 能 的 选择 。 图 中 表明 了 当 Ns, HENE x+ 被 约束 在 
[0，8] 中 前 铺 况 下 ， 穷 举 法 在 这 个 过 程 的 应 用 ， 

[#1 名 12~i 表 明了 状态 变量 随时 间 的 变化 。 图 中 ， 在 : 
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i=? H i—4, ИТР И, EE SN 
Oxx'sf, RERA at 的 值 就 不 是 容许 的 。 图 12-1 的 每 
一 条 路 答 ( 由 一 系列 箭头 表示 ) 孝 对 应 于 一 个 从 容许 初 崔 状态 
2 到 容许 最 后 状态 x Hk. НИЖНИЕ, 
就 可 以 求 出 最 小 成 本 以 及 图 12z.1 中 与 之 相对 应 的 路 径 。 和 项 得 
ERRE, JAAR SROI SARET xt түз 
Е, Хм ЕК ИЕ ТЇШ ККЖ. = 


三 、 最 优 和 性 原理 


ЕН В НЕТ, Я ЖАН 
ЕЯ, У N BU EK РДЕ EF ERES) ELE. x 的 
ЗЕ, ШЕК. Bellman EA [onm zx» 
Auk. ЖИИ ЕТДИ E CUR BUG SD FEE fad 
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E. STOP ARE SE Uu Е АИ. ЗЕ Н 12-19 10 — 
RE. 

考虑 图 12-1 的 由 状态 序列 48CDEF 表 示 的 路 径 , 并 设 这 
жш xt = А ОХ РЕНЕ ЛЕНИ T ,这 条 路 径 
的 一 段 CDEF 也 是 出 < 一 CG 到 达 B 的 最 优 路 径 。 可 用 反 证 法 
证 明 这 个 事实 , 设 CDEF 是 从 C 到 不 的 最 优 路 径 ， 那 么 相应 于 
CDEF 的 总 成 本 就 小 于 相应 于 CDEF 的 总 成 本 ,从 而 相应 于 
ABCDEF 的 总 成 本 就 小 于 相应 于 ABCDEF 的 ВИЖ, Ш 
这 和 我 们 假设 ABCDEF RRUEIERBUPI. 这 里 应 注意 ， 
Ж xt =C Ш х= В хі В, АСЕ 
ЕЕ CDEF 都 不 变化 .总结 上 述 分 折 ， 我 们 有 如 下 震 理 ， 

最 优 性 原理 :一 个 最 优 决策 序列 有 这 样 的 性 质 ， 不 论 过 
二 好 政 态 和 决策 如 何 ， 币 下 的 决策 总 是 构成 一 个 关于 由 过 去 
的 决策 所 产生 的 状态 的 最 优 决 策 序列 。 


四 、 泛 函 方程 


XLIQUN— P Еж x! € ХМ УЛ 
М Е, HI 


I(x!,N—i)- cu J(xt ui d 
i ut wy (x! u J 


i=j, 
(12.6} 
ЕШ ks ГЕ 
min 
I(x!,N—j)-uf cU JQU, и’, j) + 
i=j, pe N=] 
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Nat 


+ у J(x* ,ut D 


ај р 
:由 最 优 性 原理 | 
min 
Ох? М руи cU LED 
і= +), ,N—] 


hM—=1 
J(x!,u! z): 12.7 
D ( )| (12.7) 
СЕ Ох! uf, реж лу, ИТ 
: 欧 ， 因 此 (12.7) 式 又 可 写成 
min min 
I (x!,N-j)- епо Dry ЕЙ 


i2jfrl..N-1 


A.t | 
Y тос | (12.8) 
Ят 1+1 


:由 (12.6) 式 给 出 的 定义 
min N-1 - 
veU b Jt at i | 


=] (xt, N—j—1) 

Wt (12.8): 9079 
IG, N— p= Uy ut eros 9-7-0) 
(12.9) 
而 x ^er (12. 1) 3g RB, 25 512.9) ДИЯ 9 69 
证 东方 程 ， 它 给 出 了 一 个 递 推 格式 ， 可 忆 从 给 定 的 了 (x 六 1 ， 
JN-j-)maite Xie ХАВИ, Мр), 
Bi(12.9) АНИ ЛЕР, REAT ж 6 йш", 为 了 
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.Hi(12.9)38 38 (0,0), ДА №1 БУНАРА И X 
KX, = s er 00977, u-t, N B 

(12.10) 

12:87; B (12.9) IB тинен, dE x! 是 过 程 

:在 第 i 瞬时 的 状态 ， 我 们 要 求 最 优 决 策 向 量 u{。 对 每 一 个 
u! 由 (12.1) 式 得 到 x!*! УЖИН, PE i+ 1 В WF B 
:每 一 个 x‘*!， 都 至 少 有 一 个 最 优 路 径 到 达 终 点 x" 的 一 个 多 
- 许 值 ， 因 此 ， 从 x! 开始 前 总 或 本 将 不 会 大 于 JC a! D 
了 GN 一 ?一 1)， 如 (12-9) 式 右 端 所 表示 的 那样 ， 从 虽 
极 小 化 这 个 表达 式 ,就 得 到 最 优 的 w .方程 (12.9) 和 (12.,10) 
:确定 了 一 个 序列 极 小 世 过 程 ， 每 一 次 选 代 都 给 刑 了 一 个 决策 
quA, uf**, kie, N— j— 1 ИН PSC = u! 前 
-计算 出 来 ， 这 个 方法 显然 是 和 穷 举 法 不 同 的 。 穷 举 法 是 阅 时 
-给 出 所 有 决策 向 量 的 最 优 值 ， 在 极 小 化 问题 中 的 计算 量 也 简 
АЕТ, ат asa QULN uh es R A R 


‚МЕШ ЕЕ, ПЕН IEEE Я 
qu&. ATAO OREN и’ 的 最 优 值 , 22008 109", 
N—j— 1), BI, 3ET x^*! dg У T$ IOUU, 
.N—j-1)8E, №, xt 的 容许 逢 前 数目 是 Fš хи 
- 量 的 数目 而 增加 的 ， 困 此 对 很 大 的 状态 向 量 ， 存 迪 问 题 或 了 
-能 否 使 用 这 个 方法 的 一 个 关键， 

Я 12-2 ж м ижат, E5- RREZ в 和 决 
di EUR PAM, ОТК НЕДЕЛИ. {ЕН (a) 
„вузе Е os ELM IE, РР К PERS S K S, 

[8] (90) AAR Mu, 6, ti: 中 的 每 一 个 
-可 能 有 也 个 亿 ， 所 以 最 优化 问题 有 P** :个 页 行 解 。 对 每 个 
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"HER. АЖ К GRE. НЕ 
FRAMARAR, BARAER DP Kl 
ШЖ, ATAA {КЕН А RRR Я, ОРАНЖ 
РАКЕ Р, НЕ, 2 T 3 ЖШ, SU 
МР1 ЕЗД, 

(b) ЖЕ ЕД н, н: (10.0) хб} N — t. 
的 每 个 值 ， 我 们 要 做 一 次 加 法 ， 所 以 总 共 要 求 (入 一 1)P? 次 : 
加 法 。 翌 (12,9) 式 还 可 注 党 到 ， 在 每 一 般 对 每 个 xy ВАВ, 
我 们 要 求 P— 1 REESE, ТЕЎ (12.10) k ER E fe P — 1 次 : 
比较 。 习 此 整个 比较 的 数 HoX5NPOP—-DTO-D, а - 
加 法 和 比较 前 数目 为 (2 一 1 一 (一 IPB 一 1。 当 六 # 
加 对， 对 本 穷 举 法 来 说 如 法 和 出 较 的 总 次 数 是 随 太 指数 增 : 
加 的 ， 现 在 动态 规划 由 对 是 发 性 境 讯 的 。 

Я 125 《资源 分 配 ) 有 一 个 投资 公司 ， 将 资金 投 UTC 
不 动产 和 油井 。 可 投向 不 动产 和 油井 的 资本 总 数 分 别 不 得 超 - 
ШВ, 和 8s， 整 个 用 王 投 资 的 资本 不 得 超过 b.. НЕ EZ AE 
润 和 投资 额 成 线性 关系 的 假设 下 求 投资 公司 的 最 天 利润， 

(MI 这 个 问题 不 必 作 为 多 段 决 策 过 程 ， 而 且 它 世 可 jy 
由 另外 的 方法 解决 ( 见 附 菜 中 位 4-1)。 然 而 ， 这 里 我 们 将 捞 
ЕЕ АННЕ, ЕН ИЕ ЖИЫ ШЕ И НЕЕ. Uhu, 
Tru; ЕТ Ен ДН ЕЛНИ. HETE 际 意义 
BET пу, si,b,. bí, 56,220, НЕ 058, В,,. 
OERS r 03а: +8,36,, 1 20,448, ЖЕ Иа, 7 
u, 得 到 的 全 部 利润 ， 问 题 是 求 28: 十 44 对 #1 和 as 在 给 定 ; 
约束 下 网 最 大 值 。 

RERS- TRARA EARRA A E Bp R 
一 个 决策 的 结果 ,状态 变量 是 每 一 般 开 始 时 投资 的 资本 xe 
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ERRATE, WA 
Zeby, И, a= Hy 


Ei 12-2 Жк T UIT BUE ЗАРЕ RNE 


Na, 投资 ГА 


利润 2 H, жал H. 
Ё 12-2 


E ЭЛЛЕ AE АЕ ТЕНЕ, MAREEA БЕЗЕ 
后 一 段 ， 在 服从 于 给 定 约 束 下 将 所 有 的 资本 都 作为 投资 ， 因 
gu sf =f inle ba 出 这 项 投资 所 得 利 渔 的 最 大 值 为 
Ix. 1)548f—4mia(z; b), 


min (5, - 0, bi) 


"m 12-3 


+ $35 < 


ku +4min (by 一 n, b 


(nx) 


. к 


下 一 步 ，#1 的 最 优 值 可 由 递 推 公式 (12.9) 得 到 ， 则 


I(x? ,21 一 шах, [2u; +4111: ,53)] 
P 


gau 1<2. 


= max [2s,--4min(x,—u, ,52)] 


= пах 


[ 2н, ава (В, в, " 5,5] 
Ou sb, 


.这 里 Р(х", 2)30R T ERE AUR D CAR, 图 12-3 PT BS 
JÉRmin(b,—u,, b), fH 12-4 ZUR T EU 22; Amin (b,— 
a, ba), bu mb, bo EB 12-4 WA mi aT, bs, 


‚ 336 + 


шз = шіа(б ані, b,)—b,, MARKANA T(x*,2) 2a 
—4uf=25,-F25,, [ДЖАНЫ РИЧИ, МЭРА 两 倍 于 
TU, НВ ГАВА ИЗ СНЕ, ЖЖ ЕИ 
ETEA, ПМЖ u, Ши; БОН, НЕЙ 
本 在 这 两 个 投资 项 肯 上 的 这 一 分 布 。 

Я 12-4 《旅行 推销 员 ) 有 一 个 推销 员 ， 他 起 从 城市 0 
开始 旅行 二 十 1 个 城市 。 设 di МЕТ, ТЯ 
市 之 间 的 更 离 ，0 科 他， 力 科 入 ， 求 他 经 过 且 只 经 过 每 个 城 
市 一 次 的 面 路 册 游 药 最 短路 程 。 

[8] 这 里 提出 的 旅行 推销 贡 问 题 ， 可 以 用 整数 规划 和 
-分 支 佑 界 法 解决 ( 见 第 十 一 章 )， 然 而， 我 们 将 把 这 个 问题 作 
为 一 个 多 筑 决 策 过 程 ， 并 得 出 类 似 于 (12.9) 式 的 递 推 菠 式 ， 
从 而 求 得 问题 的 解 。 

假设 作 最 优 的 周游 ， 推 销 员 已 经 到 达 城 市 i, ЛЕН 到 城 
市 0 之 前 还 有 Rue ЛИ, АЙ. 的 ， 
HEURTE i BEDRU AGEN ja. e. Je 然后 回 到 城 
市 0 的 路 线 必 须 是 长 度 最 小 的 。 定义 DG fas rms je) 是 从 
BR b š 到 城市 0 道 个 剩 下 的 上 个 未 访问 城市 一 次 县 公 一 次 的 
最 短路 程 的 长 度 。 这 祥 ， 当 我 们 计算 了 ВО, =; Ja) 
后 ,问题 就 解决 了 ， 由 .上 重 的 定义 我 们 得 到 


КРА . min |: 
D(3]j,-. Aa) Lene [d, DC]: ө, 


Ín-i) фана, rs fe) (12.11) 
ЕН R DGI, = DN UR д ， 我 们 
BYGGBEE 
р( 3) -=9., +9. 
‚337, 


H3 Вол, --, РЖ, ЖАЛАК, 

BL 12-5 估计 由 动态 规划 解 旅行 推销 员 问 题 所 机 Жи 
#88. | 

AY HB MESEROD2'.A1D0, РН РС, >", 
ПУЩЕ, НЕРВЫ, ，…，j i 售 ， 而 不 需要 考 
ВАА ARN о 之 前 访问 这 二 个 城市 的 顺序 ， 因 
EER DG oe. ГУННАР А N- Eh A 
择 & 个 量 的 可 能 方式 ， 当 下 是 最 接近 -全 二 上 的 整数 时 要 求 
ВЕ ЕСИ, 18 он ЖӘ A Н, H Stirling 
公式 近似 { O 的 僵 ， 可 以 得 到 下 面 的 表格 ， 玫 中 给 出 了 


"m 
要 求 储存 的 上 界 。 
城市 数目 Za 十， REELE 
її aco 
17 12009 
2 200000 


ла, ИЖЕ, Ш ЖЕ 
TUBE ЖП АУБ БОЛЫР, ИНЖ ИТИЛ ПУ W, Ye 538 
Jm, ПО BA Pig VERE ШКЕЖЕ EJ, | 


五 、 单 状态 变量 时 的 计算 要 求 


本 蔬 我 位 更 详细 地 学 虑 出 递 推 公式 (12.9) 提 出 的 计算 要 
Ж. 方程 (12.9) 简 化 了 投 小 化 的 计算 ， 因 为 在 公式 中 只 是 对 
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e! 取 极 小 ， 而 不 是 对 u?，…，u-5。 然 而， 作为 这 一 计算 
O ERRU, BAR O 8 8 W E BIO, 
一 盖世 的 蔓 ， 在 例 12-5 中 我 们 可 以 看 岂 ， 这 个 存储 的 要 
求 若 至 对 现代 计算 机 也 成 了 关键 所 在 ， 
ATACDERRUIERT EL SATHAN max 


Узи), она У аул, ШТК Ен 
4-1 Jal . 


к | 
DRRR, ZX Дш. е, u= Y o (а) 及 


EET! 
T(x. = maxJ(u, e, да), (12.0) 5 НА 
N 
* "~F 
Е 
Ao 成 为 -. 
I(x. В = max Г9,(8,) T(x— us k—1)] 
TNI 


(12.12) 


其 中 设 Ix, =g (5). 

A TASA XO232)/ BU EIER SX ДЖЕМ 
ЕЯ I(x. ВМ. {ЫЕ ОЖ УГЕ ЛЕК M 
[0, z Jd, Жо, хи До, А, 2А", 
BAes, 然后 计算 和 存 诸 T(x， 各 在 这 些 节点 上 的 信 ， 为 
了 得 到 在 [0，x4,] 中 辟 于 节点 的 * 记 对 应 的 (x, R) L 
вр 

+ 338 < 


IG ву=1(тА E) ma) 
x JOE a (нА, Ë) 
А 


КЕНО? 12) КОИ, MARTER €E 
ЖЕГЕ SE ЕИ Н. ВИЕ K B Н 85 LEGE 
21. 因此， 我 们 用 和 [0，x。j 上 同样 的 节点 的 集合 ,在 [0 x 
ВЧЕНЕ ЗР u ,, ЖЕ u, 在 这 些 节 点 上 由 穷 举 法 得 
到 目标 函 数 的 极 大 值 。， 由 于 对 连续 变量 的 离散 化 ， 这 个 极 大. 
НА АСЕ Я ЕЕ РАЕН. ШЖ. 
HARD, REKKENE G. SEARE, BEE 
rex parie dA MESE MEE A K 
Ao ВЖЯНАЕ ЛАЛ, но, 但 近似 程度 很 
3, 下面 由 计算 g (m), осир, DCN ДЇ, В 
地 讨论 计算 公式 。IT(%，1) 二 g(x) 是 让 LO0，xoj 的 节点 上 由 
偿 欧 离散 集合 得 到 的 ， 用 (12.12) 式 可 得 


I(x, 2) = оёх, (и) ЕК нь, 1)] 
因为 我 们 已 经 将 u, 值 的 范围 证 散 化 了 ， 所 以 上 面前 方程 可 
近似 为 ， 

Ilx, 2)= max [gsm A)-- F(x—m A .1)] . 


(12.13) 
XXE x 在 上 0，xo] 的 节点 集合 上 变化 ,【12.13) 可 由 2 EE 
求 极 大 ， 这 个 税 大 化 的 过 程 可 由 一 对 对 地 比较 函数 值 实现 。 
在 这 个 过 程 中 ,比较 g (0) DG 10 iC A) T E(x — A 1) 
WE, ШАВЖ: XXX gOA)tIO— 
24, DER, 又 一 次 保留 大 的 一 个 ， НИНЕ SE 全 部 
比较 后 得 到 (12.13) 式 欧 极 大 值 。 这 蜂 得 钢 了 I(x, 2) 
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[0, x 1 的 所 有 节点 的 信 ， 让 注 个 过 程 中 也 得 到 了 $s Hn 
信 ， 它 显然 与 4 的 站 有 关 ， 

ERRAR, ЖОН ЕТ ДЕ В (12-0) h. . 
Ж, WETERE, JD19-1 UT HD 的 列 ， 这 个 
数值 胡可 以 时 来 求 岂 两 MERREN EAE, AEN WU. 
dien GORRA, UU в Halah uu 
—x—u 5)" и, RES. 


512-1 
x KX,1) | uX) I(X,2) us(x) 
0 x | x ' x | х 
А x x x i x 
2/5 x x x x 
RA X x | хо. х 


9112-6 i g,(x)—xe7/7, j=1, 2, Ж 


z 
max У о,(и,) 
f=1 
$3 RA TES 
z 
DOLES ох? 
ji 


[REI RR g (XE 12-5 给 由。 dE Tx, 1)-gi(. 
则 IG 1,9xe7, КАНТ, MARRO 2185/3550; 


t2 


Je b S, 2, 类 12-2 列 出 了 x 和 了 (x，1) 在 节点 的 数值 。 
ЖЕ, (12.1305 Г(х, 2), ЯШ. 
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MN 


=max| ($, 1). lee. 1), g7? 
1 за 
BL 1}. iet. Dj 
一 maz| $e? *, 3e, ет +0713 


i 


Ачи (T), mika =l, miseriis e 
内 插 得 到 [09，2] 中 任意 x 对 应 的 I(x, ДИ, DUE 


x 二 六 ,出 线性 内 插 公式 得 


‚ 4497. 


1(5,:2)= ла, DHÈ. 1) 163/2, eu 2): 
一 了 (1 ， 2) i3. 2)-10. 2)| 


=3| 10, 2)+1(2, 2)|-e7 ete 


312-2 
< I(x,1) п1(х) (х, 2) из (х) 
? M ° ° NP 
B 10-12 T Ier А 
1 e71 4 iereleus | + 
+ gt ! ы! | + 
2 28-3 + а е3 | i 


六 、 两 个 状态 变量 时 的 计算 变 求 


本 节 我 们 讨论 多 段 决策 过 程 的 状态 向 嫩 维 数 增加 对 所 过 
到 的 轩 难 。 具 体 地 说 ,我 们 讨论 问题 


8 20, lejxN 

N м 

У ам, =х, У Ем, => 
4=Е EE 
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为 了 将 这 个 问题 变 为 一 个 多 段 决策 过 程 ， 定 义 J(41, ee 


K 
n) J s Go IG y, k)o2max J (ü, (6, пу), £7 


RAII a 20, 151, Yon Ува, =y, iE 


FE! 


ЖЕ I(x, у, DEBER x жуан, Xf x uy 
的 每 一 对 容许 值 必 须 储存 ГОХ, y, FRU, ВЕ, МУ 
每 一 个 容许 值 必须 储存 一 全 类似 子 表 12-1 的 数 (8 3, SUA 
态 变量 的 数目 进一步 增加 时 ， 这 个 储存 的 要 求 会 更 高 。 

克服 这 种 困 难 的 一 个 途经 是 用 Lagrange SET ER 
Lagrange RFA, Ра АН 


и y 
F(u,,",u,)— y s noe у s=) 
171 


=} 


N 
= Ў [о,(и;) +ла,]-лу 
FE! 
SUE FIEL SX БОЙЛЕ AND. Fue B HEX 
F(u,, =, uy) К, ЖИ а, 0, jaN, 


Y u=, АЯ — REB) AH, 这 个 新 的 极 大 化 问 E 是 和 


J-1 
前 一 节 讨 论 的 问题 相 类 似 的 ,而 且 比 原 间 题 要 求 的 储存 更 少 、 
这 样 ， 我 们 用 一 系列 仅仅 包含 一 个 状态 变量 的 问题 代 符 了 
包含 两 个 状态 变量 的 河 是 . FARATAJ ТЕМ À 的 
值 会 得 到 原 问 题 的 解 . 

Я 12-7 解 下 列 问题 


‚ 344. 


z 
. LY А 
fhin—- 8 
2 f 


#,—0, 1572 
8,1578, 2u, Hasit 
Fj Lagrange RF 414， 我 们 得 到 
F(u, ja) = aj 2s Tias —410 
Ahead) E ЕДК АА: пу, aimo Жи, Ru. 8 的 约 更 
ТЖ, АА SLT 0412-3] 5 RT ER IRA ROT 
E, ИЕ Ех, ШЕ 


X =-8 


x 
il 
— 


约束 条 件 为 


Я =% MH. 
AX. = 31 77140. 


图 12-86 表 明了 我 们 建立 的 两 恨 诀 策 过 程 。 


La224 ИНАЯ, 


1 
Е 12-5 


i д0, NEA FQ, на) (1+), НЯ 
Р-Я: 2-2, (AE ULL иені, F Аи =, 
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RETRE EAR 20, 2310, 为 了 改进 这 个 解 ， 
GE 4=5， 得 到 F(; иг) al +104, H uil 55, —50, 


Fi3k UT HE 12-2092: ER л 


\ 化 这 个 目标 函数 РИ m 1.5, 


uf-6.5, BR puf+ul=9,5<10, НИЙ £9 Hu, а, 
X10, ЯП. BRER (и-и) тамка AEA 
束 的 最 低 的 可 能 和信。 为 了 检查 这 个 可 能 性 ， 我 们 必须 用 另外 


的 和 的 上 家。 从 前 面 的 计算 
中 ， 所 以 设 4=4， 则 得 


bh 我 们 知道 ,和 的 佑 当 人 导 是 在 [09,5] 
F(uí, 1) aiten iab 


du; —40, f8[12-2 лм R EG OX T а &, W 45 at=2, 
a6, Ш 0и 08-10, ЖАНА, >b ТА ил, 
ai ХА, MERRER- НЕТ, 


it, 


и, +H =R 


ч, 


上 -一 


5 


. от 


于 图 12-? 司 者 出 ,2 的 恰当 
20, 


* 346 。 


值 是 4， 满足 给 定 约 训 的 极 小 代 


à ut u^ | er nune [жинин 


Ü 4 4 16 是 
4 2 6 20 — T 
š 1.5 6.5 20.25 = 


七 、 无 穷 阶段 过 程 和 逐次 亲近 


ж 下 一 ee， 则 多 段 决策 过 程 成 为 一 个 无 穷 阶段 过 程 。 这 : 
样 的 过 程 可 能 没有 直 黎 的 实际 意义 ， 但 以 它 作为 近似 经 常 是 . 
有 用 的 。 我 们 设 gx. uf, DAJO, uj, IREAS 
3526, 而 且 当 入 一 oo 时， (x, N)>I a). 3 Noo Bf, 
(12.9) ДЖ | 


г 09= е7 D+, в))] — (2.10 
ЖЕ ДЕЯ х) НАУА, ЛУ Я ВЕ. 
RIDE, Полаки Н ЕСН ЯР, (12.14) 
式 可 用 数值 方法 求 近似 解 。 由 了 (XY) 给 出 的 (12.1 人 的 解 和 最 
PERR EE u C) 可 分 别 作 为 Ix, DL uw! GO) 的 近似 ， 
对 很 大 的 i， 这 个 近似 是 很 好 的 ， 淹 且 节 省 了 由 式 (12.9) Ж 
(12.1003: Г(х, Эми соя, 

现在 讨论 解 方程 (12.14} 的 两 种 逐次 逼近 方法， 第 一 种 
方法 是 定义 1(X) 的 第 i 个 逐次 近似 为 


гк) EFU OH, a(g(x,u)) (12.15) 


其 中 以 一 个 初始 的 人 情 计 值 CO 作为 选 代 的 开始 。 取 Гр 
* ЗАТ + 


一 0， 由 (12.9) 式 我 们 得 到 J (x) IG. i. Е, я 
ЖАР CIS A HERE EA РН SJ ЮЙ ib. 才 可 能 节 和 省 
(12.15) АЗ. 、 
I4o)-JG, ue (x))+ J aCg(ru* 09]. (12.18) 
-得 到 IQQ), ЕН 
uey LG, D+ (еб, 0)] (12517) 


得 到 下 一 个 近似 w(x}。 然 后 ， 我 们 所 ur (х) 计算 (x)， 
БУ КА. T0235: И А Я ОЯТ 
сов, ЖЕЕ (12.14893 РЕЧЕНЬ" 
(如 图 12-8 12-9 所 示 )。 这 时 ， 近 似 方 法 的 每 一 次 选 代 ， 
都 产生 (12.14) 的 一 个 更 好 的 解 ， 当 得 到 充分 精确 的 解 时 ， 
就 停止 选 代 。 下 面 ， 我 们 引进 一 个 资源 分 配 问题 ， 并 讨论 解 
尺 12.1 拉 的 一 个 逐次 逼近 方法 。 


м) 


m 12-8 


# Е—ТАНАНАЖНЫЯ Я поки. 
:在 油井 上 得 到 利润 g (п), ДЖИМ x-u 购买 不 动产 可 
-得 利润 成 3 一 加， 因此 ， 从 他 的 一 段 投资 计划 得 到 的 总 МИН 


‚ 348 + 


du miy) 
E. 


图 12-9 
3g g(n)dh(x—5). 假定 这 样 投资 后 ， 他 最 初 的 资本 БАНЯ 
.and-b(x—u), Е 00а, 5) 之 1， 这 个 资本 可 以 再 投资 ， 
资源 分 配 问题 就 是 要 使 投资 者 在 N 个 阶段 前 利 词 为 最 X. 
ЗМ 12-8 证明 :对 资源 分 配 问 题 ， 用 解 (12 .1 的 逐次 
WER, TUPE ОНУ, 
[证 ] 对 于 资源 分 配 问题 . (12.14) АЯ 


I(x)= pesas glu) а-а) 3-1 (au4-b(x—1))] 
(12.18) 


KON TX (2.18) BRE T CO RIDE ААА НЯ, Pr 
РЕЖЕ L (x)—0, B2 18) A8 


F, (x)= вая» оби) +#(я-и)] 


在 任意 实际 资源 分 配 问 题 中 ， 可 设 利润 函数 g(x) 和 AC) 
ж а(х), haao RA х20) Я 9(0)=В(0)=0, НЕ 
LEFAOEINILESHOPLTMOLUINI V MEA gf 和 
Сх), BÚ аа) Сш), DUE Za OO XE 
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№. ЛАА, Г, Слу ху, ЕВГ, (xy ` 
Jli). BDGYEDOBOEGHAEPUET ОЧЕВЕ о 解 序 
Я 14 (4), АЛЕНА, 1, (а) 9r EIMCSRESICIZ. 18) BRE, 但 
еня, ПЯТЕН. 


习题 与 题解 


12-1 《最 所 路线 问题 ) 考 虑 一 个 道路 网 ， 点 1，2，…， 
N 表示 城市 。 设 d, 20 表示 从 城市 i 到 城市 j 的 距离 ,ff， 
Sem Mb ix] N 的 最 短路 线 的 长 。 假 设 每 一 对 城市 都 有 道 
АЕ, ЖД, i=1, ++, N—1, 

[LM] 由 城市 i 经 过 城市 j 叉 按 最 短路 线 到 城市 М 的 路 
EE di +f, Hf, GEN PEN Bm NS, 
所 以 fidi afa РИЗО ЕУ М. ян ная 
城市 N 的 最 短路 线 必须 通过 某 个 城市 由， 然后 按 某 条 路 线 
Zim М, ЕЕ Bas Зя, ВА, Ў ам. 
然而 ， 因 为 a.a. HAE E m=, e №, mri 有 
Jfipd „+ м. 将 这 两 个 不 等 式 结 合 , 有 fi 一 dw 十 fm 
又 因为 f. 不 能 大 于 d, +f, ，j 关 i， 则 有 


J = min d. +Í) 


这 是 非 线 往 代数 方程 ， 没 有 一 般 的 求解 方法 。 因 此 我 们 提出 
一 个 解 这 些 方程 组 的 逐次 表 近 法 。 这 个 方法 将 给 出 与 (12.9) 
КЛ. 
设 KA А А РОЛИ. RUB БЕА Хх. 
движ 
* $50 * 


fte BSc, e gom (12.19) 


НН p=, ЗЕМ, f'Ü-o. X, НЕЖНЫЕ 
Ета. ВНЕ TOES 
ЕЕ. ЕЕ, сез ‚ N 的 集合 上 取信 ， НЯ 
数 是 由 城市 1 到 城市 入 的 路 线 的 长 度 ， 

12-2 ЕЖА ЕЕ ФИК КЈУ, 。 

[ur] 虽然 可 以 得 到 解析 舶 证明， 但 我 们 给 出 一 个 第 让 
次 近似 了? 胸 实际 解释 ， 它 直 融 地 证 明了 在 有 限 个 阶段 中 
PRAE о, АЕ РЕКЕ 
多 经 过 有 -1 个 城市 的 最 短路 线 。 

对 上 = 2 这 是 显然 成 立 的 。 因 为 失 [12.19) 得 f'P dia. 
ТЕХ f'pE SE SR МЕРЕ ЛИН 
Е, ЕЖА: НАТ N 至 多 经 过 一 1 个 城市 
的 路 线 ， 这 条 路 线 从 域 市 i 到 某 个 城市 i， 并 县 从 城市 了 到 
RE МЕЖ В—\ Pu WP У, ВА, A 


ГНАУ N E£ В OR вила п 


(diu tD, RÀix(219), ft! = min (d, , + 


fd). B ye RASSE SIN 至 多 经 过 上 个 城市 的 
RERE. 
因为 总 共有 N 个 城市 ， 从 任意 一 个 城市 三 到 城市 广 的 
最 短路 程 最 多 包含 м-т. НЮХ А, сас 
N, fif, Büx(2.19) E £ N 次 选 代 可 以 求 出 六 。 
12-5 ЖИ 12-10 ЭННОВЕР, НЕЕ 
РАТИ, Па РЕ, ЖАЗА OH 1, 
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2，3 到 城市 4 的 最 短路 程 。 
CONO 按 (12.19) 式 的 递 推 格式， 我 们 设 
fie Лр, fno 
则 得 | 
пра WP (da ВР) шаа АР, dist ГЬ, 
а, Ef» | 
| = min(44-co, 2-09, 4+0)=4 
APAT R 出 уре, A= ИР=0, JP, га, 
的 这 些 管 列 在 表 12-3 中 的 第 3427. В-КА SHE A х, 9 
© F= fi—2, f'-T0, АЯ ВЯ fs 
(М) ВАМИ, 所 以 有 f,=f'P= Реа. f= 
=1, fs 二 了 =2， f =0, НИМ 1, 2, 3 到 城市 4 的 最 得 
路 程 由 图 12-11 5805, Т ЭЛЕШ ТЕ ХНТ НЕТУ ЛЕ]. 


T 2 


@ @ 
图 12-10 Bl 12-11 
12-4 求 推销 员 芷 图 12-10 表示 的 城市 间 的 最 短 的 回路 
яиНКакЕ. 


[811 УТЕ АТ o 代替 城市 4 ,并 开 
ЖАХ. 先 计 算 DG/Py а, tdi OSG E, 


7352 + 


312-3 


ns 
Е MU 1 2 3 4 
Pd Е _ EN _ _ 
1 es oo en | ù 
2 4 1 4 0 
3 4 1 z 0 
4 4 1 2 Q 


РЯ НН 12-4 给 出 ， 由 DG] j ИН Н] 递 扒 计算 


Dij j. {+)= min [dise +D (iul /n-15. дана) | 
l«m«4i 


№ = k m 
= CO ж ш 
m н m H 
в - A o 


例如 
Ве, 3)=min[d,; DOLS) das +D(3| 15] 
DES 


= шіп 4 二 +6，1 十 6j 二 7 
Da js, iE Ex 12-5 给 出 ， iia E BAUR UE ЕЛЕМ 
DO |, 2, 3), AARAM 12-5 E DG ja, jy E 
得 到 


DC0l 1,2, 3) 2 min(d,,-F DC1|] 2, 3),d,,-- 00211,3), 
й, t DCSL[ 1, 2)] 
=min[4+4, 1+7, 4+71=8 
"m 12-11 所 示 的 路 线 相同 ， 但 没有 第 
k, 因为 一 个 回路 轧 游 可 以 沿 任 何方 各 旅行 。 


312-5 

рагу) 7 | 

Чөн; (1,2) {1,3) (2,3) 
РД i ^ 

£ NI _ 

[d 6 7 6 

t 5 5 4 

2 8 了 3 

3 T 6 2. 


12-5 《可 靠 性 问题 } 考 虑 四 N 个 零件 组 成 的 具 有 最 小 
重量 的 结构 设计 问题 。 第 个 等 件 的 截面 积 为 A, 零件 不 损 
坏 的 概率 为 p), ЛЕА Е 记 79 w (CAO. 如 
果 一 个 零件 损坏 ， 就 认为 整个 结 移 损坏， 并且 损坏 的 事件 认 
为 是 统计 独立 和 的。 问题 是 要 设计 有 最 小 重 量 的 结构 ,同时 不 
炳 环 的 概率 又 有 一 个 下 界 ， 试 导出 这 一 问题 的 汉 陆 方程 
(12.9), 
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№1 
[97 йй Y m CA), ВВЕ 


*-1 
[[э‹(4,). 设 示 损 坏 的 概率 下 界 是 p， 我 们 定义 


f= 
MN- ħal 


Py, [р.(4,), 10, N— Domin У шв, CA 
=} i=j 

HB P.- p, jN—1), BRIO, 1)=usx-i 4.1), 
Ен A... ВЕ LR PERLES 

现 设 j—N—2, ЖИЛИН А„.,, Ж 
坏 的 概率 为 pe 244. 2,), MUSE N — 1 个 零件 未 损坏 的 概 案 
为 p&-i1— p/ pu- iC da i). МОЛИ EUR CS 
J(p,-,, DH 


I(p, 2)= min [o (4-0) HE COn, 1)] 
y-2 


对 一 般 情 况 | 

Ilp, N—j)-min[w,CA,) НГ, и, N—j—1)] 

12-6 考虑 图 12-12 Bros H EAE HR P S, Ж 
ПАНК ЖЕНИ, н (4) -1— 
了 (A 给 出 ,其 中 

A 
"nu f iQ) xax 

0 A2A, 


如 图 12-13 所 示 。 每 个 零件 的 重量 是 щш(Ау=шЛА, вл 
TR. 试 找 由 最 小 重量 的 结 构 ， 且 损坏 的 概率 小 于 1 一 p， 
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PLA) 


у 2 
i Ac 


r ~ 
L 


| i 
Am, 
Tort i . , 
E 
E 
|| 


Hi 12-12 图 12-13 
[№] 由 问题 12-5 我 们 得 到 IC, 1) mw (А) m4], 
其 中 p t= papp, AHB p(A,)= p, 188] ATA, 
—pAs/2, B I(p, Sul A.—pA1/2]. 其 次 我 们 用 
Гр, 2) = minlwA, E ICpi, 131 
0 


其 中 
p =- _ Р AL P А о _ 
| РА) 2(1—A,/A,) 
直接 计算 得 到 


= — IE == _— Mi v. 
Hi, Оза, B аја, СЕТИ] 
将 这 个 表达 式 代入 上 述 的 泛 函 方程 ， 我 们 得 到 | 
А-А, / рАЗ/2, I(p, 2)—w[24,—4/ p A2] 
12-7 重新 考虑 问题 12-5， 求 Ps= ДАЮ ES 
% 
在 结构 的 重量 和 成 本 上 有 约束 条 件 。 将 此 问题 作为 多 段 决策 
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МЕНЕН (12.9). 

[ 解 ] 假设 结构 的 总 重量 为 由， 对 这 个 结构 可 利用 的 总 
资本 为 局 ， Не (Арте, SETANE 
量 和 成 本 的 约 东 条 件 

а = ш, CA) 
C444 7C.— c (4) 
Fah А: 20, И’, —W, C,=C, осш, (A) И, 


№-1 


0<c (A4) C C, ШЖ ГОУ ,C, Nye шат [[р,(А,), 


=й 


ЕЙ $E (12.9) 5 
IW ,, С;, 太一 门 =4 Ln; CA HCF pars Суза, 


N—j—-1)] 


12-8 СЕНЯ E-AN 自制 造 过 程 ， 在 第 i Вт 
用 的 原材料 为 xt. me 的 一 部 分 用 y! Жл, MKA EE 
产 原材料 本 身 。x* 的 另 一 部 分 ， 用 2 霄 示 ， 用 来 增加 原 材 


N- 
# с, 的 生产 能 力 、 问 题 是 对 У (zt —yt —zt 8532 I fi 
f-0 
过 程 ， 策 可 利用 原材料 的 总 量 为 最 大 。 
[M] Jet, c 的 增长 放下 列 方 程 表示 
xf*t = (1-+а)у! 
сіс + Bz! Е 
其 中 a，p>0， 首 先 考 虞 这 个 过 程 的 最 后 一 段 。 我 们 夏 出 ， 
办 为 这 是 最 后 一 段 ， 没 有 z' 和 ot 的 下 一 个 信 ， 所 以 把 所 有 
ТАН РАНЕЕ. Е 


I(xF-!, Си-1 рык 
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Жш IG, C, Мј) КАЕР N — j RHE pt ТЕ ЈЕ 
МЕЧЕ. ВХ, ИНАЛ НС, АП 
由 (12.9}) 式 得 到 

Il’, CN. 2)= marla? = y#-2 — zN-2 + xN-1) 
其 中 x-ray", BO 

10х92. CN-2 ， 2)— мах (хит L ау? — N72) 
I yE, 277220, ИИ ЖЕ 27-70, АНУ 
该 取 它 最 大 可 能 的 值 现在 УМ 3xxY7?, yNCxlo'7?, BR 
VUE x" mU, WA ymt-xm*. B | 

I(xN, c? 2) taxt 
TER), 4 Ctar, | 

y" img, B (29°, cg 2) = хи pao? 
EARLS fe . 

1(х#-%, cF^*, 2)= xF'-?-Famin(x7-?, о”-# 
ЖЕ АЕРЫ, ваяния Pa kk LORD 
I(x', et, М). 

12-8 《害虫 控制) 我 们 考 弄 害虫 控制 问题 。 五，Y 表示 
НЫ, БОЯ 下 捕食 昆虫 了， 一 种 杀 虫 旗 可 mH 
K X, ЧУ. W x' му 分 别 表示 蕊 和 了 在 第 i 个 
明 时 的 数量 ， 问 题 是 求 在 [0， 站 一 1] 时 间 内 的 最 您 茶 虫 痢 

Ж, Ud ax" by" REME. Xx Ha, b0, N R— AE 
意 当 数 . . 

[E] u AES PRU AARE, АНЯ 

写 出 描述 X. Y 数量 的 动态 方程 + 
хіх +a(nt)xt 
yt-1l=(1+y)y'—B(ut)xt 

Jp y20, Вам B (ut IERRA A EMA 
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ЖИВЕЕ, ЛЕ, АС) не МН, АГ 
BUB uf (й, a(a')«o, 为 明确 起 见 , ПП alat) 
—a(a!)*, B(u')—e-:59!, 3E i N—1,. 我们 用 Ж ВН 
- 春 方 程 可 得 到 
аху iby = аху —Ebe-;«N71-- аа (ак)? ] gY! 
Thr)" 


B *(axW b yl 

EFC Ly") cb fiera + 7аа>0 
设 d(axP Eb у) /da 1-0, РИ" d Ий, Ша 
TZ 


№-1 
2aau* ^! —b fle t 


3/7 ERI FLOR CR PI 12-14 9928) .. aa), eu 

Y (а5-2 уе, РЖ cx 十 加 yw 的 最 小 值 ， 再 用 证 通 数 方程 

Ilat, yi, 太一 全 一 min JO, yir, N—j—1) 
w... 


ТГВ s^ ИЖЕ, 0, =, Х—1, 


hy 204 


bA eil 


ui 


12-10 《经 济 增 长 ) 考 虑 一 个 用 控制 政府 的 消 费 Жад 
镭 家 经 济 增 长 问题 的 简化 描述 , 设 久 表示 相继 两 次 国家 
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ЗАРЕ, ВЕН RU] ATUS E БЕ М 
年 中 政府 最 低 的 收入 为 最 太 ,。 XE XAR EJ HESS E F а Л 
程 (12.9)。 

[9] 为 将 这 个 问题 化 为 多 自决 策 过 程 , х, ce! 和 
y! 分 别 表示 第 i 年 末 的 国家 收入 、 消 费 和 个 人 投资 ，w'! 表示 
在 第 i 十 1) 年 中 的 政府 消费 。 则 有 

xi =g pyt pant", c! =a{yt 1)! -! 
这 里 a(s RAPRA ШЕ, ВЕЕРА SR 
影响 的 ,假设 个 人 投资 依赖 于 相继 两 年 消费 的 净 差 ， 所 以 
y! = (и (с —cf7!) 
由 上 述 方程 得 到 
x'-[140-8(2'7!)]a(u! !)x* ^ —a(uf -x ur 
如 果 假 设 (пу Bat) sire S 26, UST 简化 为 
xf —(14-f)axf7! арх и 
TY UR EARS EUER ЕК хех ЕЕ 
新 变量 21-I 一 xi 一 Xi， 财力 家 收 人 的 方程 可 写作 
xi-agxicilafzi-iqgayti | 
zíe(a-1)!7!-FaBgz!-1-pyi7* 
其 中 新 的 状态 变量 是 好 -1 和 24-1。 
AEREE, ПЕЛА ЕШ, MUX 


x-1 1 
R, 引入 约束 Yu <U я, -0— уа”, MU, = 
ї= 0 FEN 
U,—u!, 并 且 政 府 消费 的 年 约束 成 为 Osca! 0,0, € 
J(x!, N—j, uf, e, y) min(af*!, ee, xF) 
Ist, N—j)—maxJ (x!,N—j, uf. аст 
0€, £«U 
тафон 
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外 (12.9) 式 我 们 得 到 


Г», М-р= max min[(x!*t',I(xi'!, 
jeu <; 


N —j—1)] 
A i=N—1JF08, НЕВЕЛИК, FP 得 ЕЯ. 


FEE ЕЛЕ ВЕН. 
| 17-11 НМ 12-10 m, ОЕ Е 


»"». Bac Bo, U-, 


[ 解 - 首先 考虑 求 第 二 年 政府 的 最 优 消费 ， 中 


x= at pateat 


Jeet, i, п) = minxt = t! tpa! 


I(x!, 1)= max (ие) 
PM 2 4 


ШУ (и, 1, 81329 ш! RREK, DUlb(st)*--U, —i—at fe 
JERK. ARU, 是 在 第 二 年 开始 时 ， 由 政府 消费 ЭМ 余 的 
资本 量 。 将 (41)* 直 接 代 入 JO, 1, a1), 3I, 1) == 
ge Tat). 


下 面 考虑 求 两 年 期 间 政府 最 优 消费 的 问题 。 这 时 有 


xia TAa 


TUR ВИЖ 12-10 中 得 到 的 I(x， 太一 站 的 泛 函 方程 ， 则 得 
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Ilx’, 2)— max (min[x!, I(x! , 1]? 
ожо 


. Г] 1 1 
= max minfa аи, — gi 
бн xí 2 + 4 + 2 


HL 0-0) 


. 1 1 3 
= MAX !min = gt a", 2y? 
‚пах { 2 + 4 + 5 


3 1 à 
tn 
GAL 1 і —3 0 3 48 
dk А > +z, B= +в, М 
0 = í „1. 
Ta. 2) vere [nia( А+", В 1»)] 


图 .12~15 АНТ B4 hF, Аи 和 B-4 цо (Е Ж 


° 的 函数 的 图 形 。 函数 mia(4 十 时 ， 卫 一 二 3 的 也 在 图 中 用 
狂 线 画 出 ， 由 图 可 以 看 山 ， 这 个 函数 在 区 闻 [0，1] 内 达到 极 
Ж, НУ A+ut— B— at RES x° 相应 的 RÍO, Hl 


(2*)*— 5 (B-A), № BA, ИЖ ИО 


E (a*)* -0 ЛЕНИН T ut НЫЕ ВА Qa!) t 
-—(n*)*WÉ ш. | 
12-12 考虑 多 段 决策 过 程 。 其 状态 方程 为 
| 
BEC 
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(ut) 


Я 12-15 


J(x*, N, u’, TN а) S tane roy T 
taù 


求 最 优 决策 序列 。 
1%] 考虑 仅 币 一 个 阶段 时 的 决策 过 程 ， 可 得 
нь 
因为 
"айры ч» 
ВЕР 0-1, 1,0971) RR, 2 dJ(xF-1,1, g-t 
/da 一 0， 可 得 Re Qr 1) rnt, (хи, ууш 


JG, 1, (шит) (ям-1) 1, 
НХ, ВЕ вина. Ei(12.9) 4 
I(xN-5, 2) = min [ (09-2 )*4- ( x-3— ди ys 
+1, 40] 
. 363 +. 


- men] Gas) e Gara ry 


BN 2 
EEG | | 
НО f£ 91 = дм? —щю-% РКИ И АЕ 
GBAMESER, GA р 


X (x777)?, РАННЕЕ (x, м) х сч, Н 
Tut Xx ARMES, В latt, N =j) K(xittyt, 
由 式 (12.9) 可 得 


I(x!,N-j)5 "HP [(uf)! (a! mah)! E (xt, 
N—j—1)] 


= "r (uf)! (i a!) ! Get 12] 


HRED, х0 міці, ВИН, BiU] 


(af) GER. ua, Lat, N— p= ЕЮ _ 


从 而 由 归纳 法 证 明了 所 要 求 的 结果 ,如 果 我 们 记 Ky. - 28 
常数 E 在 第 加 一 j 一 ! 自 的 值 ， 则 由 上 述 结果 可 得 


1+Ку- ;- 
К. ,= 4-j-1 
YL 2ER yagi 


HR, =L, Gm Es t, IG N m ) Ky (zna, 


这 样 使 用 Kyo, 的 递 推 方程 ， 不 用 在 每 自作 极 小 化 计算 就 能 
Ra em IG, N Cj). 
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12-18. cR 12-12 НИЯ В W 
的 解 。 
CRI 由 (12.14) 得 
IG) min[u? d (ха): 4-7 (x—)] 
БУН, WUI'(x—a)— K(x—Wu)?, HEX 
D (x)= тіпа? + (x —u)' - I*(x—u)] 
= тірш? +(K +1)(x—u)*] 


ЭМ ERE, HI Bat—--E)x/GM K), I'(x) = 
(1+К)х? /(24К), BEEN I' GO = (х) GET UE Ui 
程 将 立即 线束。 这 要 求 


NOx IRR К —0.02, И g*—0.62x, I (x)=0.62x2, 
12-4 (шан) а(х) а, b] ЕЕ 
хачи, ШШЕ мини Ж A & 
Е. ВАН ЛИНИН, SUM ОН 
立 并 解 此 间 题 。 
[8] ЕАЖЕН[с, БЕНЯ g(x) 的 问题 ， 
ЕН Я Я mte, ЕН т, c WO RIS, 


оба бт, в)= | Та(ху—тх—]°4» | 


得 到 。 因 为 积分 对 m с, ЛИЛЯ 
TUS, ВЕ 


Mo= | о)ах , Mi= | za(a)az, 
1у=@Ф—а), I,—;('—a9, L =+ (bt —a5) 
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mm c BD 82 10458 ПИ ЯВ 
ml Í +cl,=M, 
тГ. +1 =M, 

虫 此 得 到 


„_ MT 一 M 
1222 


с*= М.-М, =x,(a, b) (12.23) 


1-1 


^ B 12-16 
我 们 引进 函数 х, (46,5): х,(в,6). DLE EIE т" 和 ce" 是 - 
a, big, 

其 次 考虑 用 两 条 直线 逼近 gf) 的 问题， 将 [4, b] 23 
ВТК 1а, xy-.1€[xy-i:,5], 如 图 12~16 所 示 , La, 
%y-1j] 上 的 直线 方程 为 mw-1X 十 Gy-1: [ху-1, b] 上 的 直线: 
方程 为 тух су. БАЕО Е ДЕ], Вр 

Ji(a,b, хил» mei. cy- 一 | La) T maie 


一 cr-i]sdx 十 | aMCO тих су Зах 
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<> I (а, 5) =1 la, b, т”, c") I, Ca, 5) = min Ка. ` 
b, хи-1, би-1), 2E BL HE (12.9), 得 到 


hame mia {ol ms 


PEy-1, N-1, *N-1 
一 Сна l? dx-- f, Con в 2] 


SEXE, HET xyz- PME, my. (ü сн 的 最 优 值 是 my = 
x (a, лу), С#-1==5:(а, Xy-i). Ж My- Meg- ЭХ 06 
AAA T, (a, b, xy-i, LL cw=1) 中 ， 得 到 函数 
J (a, b, zy ci). CRS zy-i 有关 ， 对 хн-1 x Jo, 5, 
xXw-1) 的 极 小 ,得 最 优 值 t-a ИХ mci, бу-у, тїї cy 的 
-相应 的 最 优 值 。 

12-15 求 由 [ae， 约 上 的 两 个 常数 值 尊 数 Я ия) == 的 
REHAL. 


Ë Kx) = 2 


ен в 


| 
i 
i 
1 
| 
| 
I 
' 
| 
I 
1 
I 
a 


ү 12-17 
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[M] 定义 Jo(a, b, оа) [| (а со) da m I, 
(a, 5) = аа (а, b, с). 用 微 积分 得 到 (a， b) (b 
—8)*, со ШЕВА с-а) 8 EB] 题 的 解 如 
图 t2-17 所 示 。 

яж, —————— ня. 


ЖХ 80, ПЯТЬ, sl, Ea, 1], 如 图 12-18 
рэк. ВЕН НИЯ ED 12-14 ИЖЕ. E 


1,60, De miaf | (oda 1 Ga, )] 


—min а-о) 


Gov) 
用 微 积分 解 这 个 报 小 化 问题 ， Brst, ==, Hng 
已 知 的 ， 则 得 到 eda). 最 佳 逼近 如 图 12-18 
BER. 
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MERE 


12-16 一 项 研究 基金 有 X 美元 ， 分 配给 站 今 不 同 的 
研究 补助 金 。 设 a T 7 С) 分 别 表示 分 给 第 1 个 补助 金 的 
”美元 数 和 从 第 了 个 补助 金 得 到 的 利润 。 将 这 个 最 优 分 BORD i 
НУ Е, ЛЕНЕ, FRR 
Ra FORM (o 见 例 2-434] 12-5), 

12—17 XR EHEE[O, 112-29 8T EX Hl, ЖН. 
在 子 区 间 上 用 直线 逼近 g(x)。 当 g(x) 二 x? 时 ,将 这 个 问题 
化 为 一 仿 多 设 决策 过 程 ， 并 求 其 解 (提示 : ЯН 题 12-14)。- 

12-18 《 采 金 } 设 有 两 个 金太 X ft Y, Ла A x Уу 
на, Hj P, 类 示 采 矿 机 被 在 X КУЛЖ r RS, Srs 
sux, 并 保持 工作 秩序 的 概率 ， 则 1— P. 表示 为 在 XY" XA 
ВАН. WP Y P. Sry. P, 有 与 Ps 相同 
的 意 义 。 假 设 机 械 左 第 一 次 使 用 后 不 损 环 ， 它 可 以 再 一 次 在 
站 或 了 矿 中 使 用 。 然 而 在 三 次 使 用 后 ,机 械 要 求 保养 ， 试 
求 使 用 机 被 的 最 优 策略 。 以 使 读 机 械 的 采 金 量 最 大 。 

12-19 考虑 求 函 数 f(a)=x xy 的 极 大 值 的 问题 。 
约束 为 x20, Yx =a, a>0, IFBB (а, 1)=a, 3B. 


jz1 


ба, N)= резка UI (n, x, N—1)] 


N- 
12-20 AT ц, і= 0, "tts N—;, ху [e(u*)* 
Чаи. Rupe, d»0, Jos S Boat 
=ах* Бон (18285 : 见 问 题 12-12). 
12-21 求 问题 12~20 中 给 出 的 多 段 决 策 问题 的 无 穷 段 带 
过， 并 解 这 个 泛 函 方程 (提示 : 见 问题 12-13)。 
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BETIZE KARARI 


在 前 十 二 章 中 ， 我 们 讨论 了 求解 各 种 非 线 性 规划 问题 级 
许多 方法 和 标 法 ， 象 在 任何 非 线性 理论 中 那样 ， 每 一 种 方法 
都 仅仅 对 一 类 特定 的 何 题 才 是 有 用 的 。 除 这 种 局 限 性 外 ， 每 
种 方法 当 问 题 的 维 数 增加 时 就 不 能 应 用 ,特别 是 当 变 量 的 数 
昌 增 大 时 ,数值 算 法 药 收 化 性 未 能 在 合理 的 计算 代价 之 内 得 
到 。 确切 说 什么 样 的 整数 值 相 应 王 * 大 "， 这 帘 度 依赖 于 问题 
的 结构 。 一 般 地 ， 最 大 的 问题 能 够 用 线性 规划 来 解决 其余 
依次 是 二 次 规划 、 整 数 规 划 、 茶 些 非 线性 规划 的 直接 标 法 和 - 
动态 规划 ,具有 几 千 个 变 攻 的 线性 规划 问题 是 要 经 常 处 理 的 ， 
而 多 于 两 个 状态 的 动态 规划 问题 就 似乎 是 解 不 出 的 ， 

为 了 推广 这 些 方法 解决 更 高 维 数 的 问题 ， 有 要 修正 方法 : 
和 使 用 特别 的 技巧 。 现 在 这 些 方法 已 经 作 了 广泛 的 研究 并 且 
已 经 构成 了 大 规模 数学 规划 领域 的 基础 ,在 多 数 情 况 下 ,为 了 
使 所 要 解决 药 癌 题 的 维 数 增加 ， 大 规模 数学 规划 采 月 了 一 类 . 
特别 问题 的 结构 。 分解 方法 是 将 问题 分 解 为 一 些 能 独立 求解 
的 更 小 的 予 问题 最 后 一 步 是 将 于 问题 的 解 加 以 组 合 后 使 它 : 
成 为 解 原来 最 优化 的 问题 。 这 一 步 称 为 主 问题 或 二 级 河 蚌 ， 
当 这 个 方法 或 立时 ， 减 小 问题 的 维 数 所 花 的 代价 ， 是 在 得 到 
二 级 问题 的 收 敏之 前 ， 必 须 多 次 地 解 每 个 予 问 题 。 有 时 ， 在 
非常 大 的 问题 中 要 精确 邮 解 出 最 优 解 是 不 实际 的 。 这 时 ， 在 . 
得 到 完全 药 收 敏 性 之 前 ， 终 目 高 一 级 的 算法 以 得 到 一 个 “好 
的 "可 行 解 ， 这 也 就 满意 了 ， 
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13-1 为 了 说 明 分 解 的 概念 ， 我 们 考 碟 典型 的 工厂 最 
优化 问题 。 这 个 工厂 由 汽 多 单个 的 单元 加 工 过 程 所 组 成 ,每 . 
个 单元 过 程 本 身 都 很 复杂 。 而 每 个 过 程 用 的 原料 又 是 由 其 它 
的 一 些 过 程 生产 的 ,或 者 是 从 外 面 买 来 的 。 此 外 ， 每 个 过 程 
生产 的 产品 可 以 供 另 外 的 生产 单元 进一步 加 工 或 者 向 外 出 
些 。 显 然 整 个 工厂 的 最 优化 ， 就 是 要 使 每 一 个 单元 过 程 优 
化 ， 而 县 要 优化 各 单元 过 程 之 间 的 相互 作用 或 协调 。 

[M] 为 了 分 解 这 个 问题 以 求解 几 个 独立 的 子 问题 ,我 
们 暂时 搁置 和 忽略 过 程 之 间 的 相互 作用 ， 在 独立 地 优化 了 每 
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—THCUSBRIR, T THEXEAEHEUSEGROK, EDI 
成 一 体 的 最 优 解 。 然 而 ， 因 为 我 们 开始 时 忽略 了 过 程 之 间 的 
相互 攻 用 ， 在 第 一 次 试图 将 这 些 音 元 过 程 的 解 组 合 时 ， 可 能 
是 不 可 行 移 。 因 此 则 要 求 二 级 算法 的 几 次 迭代 ， 

为 了 从 图 形 上 说 明 这 个 分 解 过 程 ， 图 13-1 表 明了 一 个 非 
常 简单 的 生产 流程 ， 其 中 变量 x, 表示 由 第 i 个 过 程 生产 前 产 
品 数 量 ， 图 13-2 说 明 对 这 个 工厂 萌 最 优化 过 程 ， 其 中 单元 过 
程 是 独立 优化 的 ， 然 后 再 在 高 一 级 协调 。 

久 为 大 规模 规划 的 文献 是 很 广 这 的 ， 在 这 里 我 们 仅 讨论 
几 个 最 重要 的 课题 。 关 于 这 一 主题 读者 可 参 A [Wismer, 
1971] 和 [Lasdon，1970] 两 书 。 


一 ，Lagrange 通 数 的 分 解 
首先 考虑 如 下 形式 的 问题 
max Y АС) 


Hf "МЕ X, X 0, £=], 2, +, М 
Tg LagrangebaEr, Р] 


L(x, D= Y f, G.) + У нт, бк, Хр, +, Xk) 
或 者 
L(x, = Ура, ха, ns х)] 


(13.1) 
为 了 分 解 这 个 问题 ， 我 们 把 工 (X， 上 是 ) 写 成 另 一 种 形式 ， 使 得 
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上 式 括 号 中 的 项 仪 仅 是 第 i 个 子 系统 的 函数 ， 为 此 ， 先 定义 
— Edi BJ 3E RES Lf 

$,-x, j= 2, 3, =, N (13.2) 
如 果 将 方程 (13.2) 也 加 到 Lagrange 函 数 上 ， 以 取代 (13.1) 
X, В 


LG, А, в, 9) = У Lf Ou) де Qn. 


f=1 
$1, За, = Byres ЗА) РАСХ 7 $ )] 
(13.3) 

НИ УР NEIN FICIMLESISES S PESEE UT 
0. 

现在 可 以 接 酚 种 不 同方 式 分 解 (13.3) 式 的 Гаргапре Bf 
数 ， 第 一 种 方法 是 把 $, 看 作 固定 参数 ， 则 对 每 个 子 问题 的 
Lagrange ВГУ y 


L, (x, Аз» На, S,)=f (х) Бито Xe .S, 


Sa nS, $4) уа FATC 7S4) (13.4) 
$=1, 2: N 

这 县 我 们 把 所 有 这 些 项 进行 了 重新 排列 ， 使 得 只 有 不 同 Ж 
TUI EÉSUBE BTE NARI “要 在 每 个 Lagrange 
BE EX L (x, Ar, Ву, $3), =1, s, N ERATE 
798, E BEER PE, рн ARN. 可 以 用 
第 四 剖 讨 论 的 必要 条 千 来 完成 。 

必须 确定 一 种 选择 参数 $1 的 最 优 值 的 方法 ， 这 一 步 称 为 
二 级 最 优化 ,用 已 讨论 过 的 简单 方法 来 完成 、 这 各 Lagrange 
分 解法 称 为 可 行 分 艇 ,这 是 大 为 用 方程 (13.2) НИЕ 
约束 总 是 满足 的 。 这 样 一 来 ,虽然 在 得 到 SHERE SE Ж 
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机 煞 之 前 ,终止 了 二 级 最 优化 问题 ,方程 (13 .4 的 解 也 是 可 
行 的 。 

对 方程 (13 .3) 中 的 Lagrange 函 数 的 男 一 种 分 解 方 法 是 
把 和 ;看 作 固定 参数 ЖЕЕ 

Зуух, К j= 2, =, Мар 
(13.5) 

其 中 $1 ;表示 在 第 f 个子 系统 中 有 xy ШИ, 

代入 到 (13,1) 中 ， 并 用 Lagrange RF A, HOLDA 
加 上 去 则 得 

І(х, А, n, $). 


= YU. 0D BIS GS, $415 9125 77: 94.4, 7 


f=] 


N 
Sois Yar Gu —$1 7)] 
1=1 


HPE gifx，…，xw) 不 是 xy 的 函数 ， 则 A,,—0 
现在 子 系统 的 Lagrange 函数 为 
LO, Hi， S, À  )=f x) Tg Qn 


№ 
5,1, Si "t, $17 S.) Y AT 
#=1 


- Ум, (13.6) 
j=l - 
在 (13.6) 式 中 对 х,, B, RIS, 的 驻 点 ,可 以 作为 1y 的 函 
数 由 KKuha-Tucker 确 定 ， 在 一 级 最 优化 问题 中 确定 这 归 什 ， 
在 二 级 最 优化 中 确定 和 :Lagrange 函数 的 这 种 分 解 方法 藉 
为 对 但 奇 行 分 解 ， 因 为 可 以 证 明 ， 从 (13.6) 式 产生 的 二 级 同 
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887€ JA C13 .包产 生 的 二 级 问题 的 对 惕 ， 
113-2 MT BERGE TETARA Mmt 


min Yen. (13.7) 


Е ўлка (13.8) 


B, x,Zb,, x, = 0 | 
DR] 有 互联 关系 的 等 式 是 (13.7) 和 (13,8)， 现 在 可 以 
= pLagrange Ж | 
L(x, à) = Y CCP XT x, —Ь)] 
i=! | 
АБ t Po ES 
min(CT+ ATA, )х, —À?b (13.9) 


X, 
Bf B,x,25,, x =Q 
二 级 最 优化 确定 ABIRE UC, ТЕ Ed IHN ЕШ 称 
为 主 规划 ， 对偶 可 行 分 解 称 为 目标 调节 ， 这 是 因为 互联 约束 
&13.8) ] ZU st fe iE (13 огненная. 


B] 13-3 


"3175 = 


可 用 分 解法 求解 的 大 多 数 线 性 规划 问题 ， 如 图 (13-3) 所 - 
AE REEL Н. 
0415-5 МЕНЮ И 


minf(x,,x,)=x2—12x + qb 


页 用 可 行 分 解法 ， 写 出 来 最 小 问题 的 两 个 独立 的 子 问题 。 
LAE) WERTERA И ВБ ARA x i= st A. 
НИ ТИ, П Lagrange Ў 


L(x,,21,8, 4) —x1—12x, tiaj ss tAE, —5) 
d LEAD, ахвя. TATE 
200 LG А, S)=x1I—12z AG 8) 


Lin, 5) = я-а, 


ЖА 
9L. 。 _ " 
àx, 2^ 124-4 =0 
ЭТ: ay S 
ài" S20 
9L; |... eL 
àx, 77 $=0 
因此 对 子 问 题 1 得 - 
xf(s)os, A*(3)12—25 
ALTE 2 8 
xí(s)-—s 


013-4 对 于 例 13-~3 画 出 表明 所 有 的 信息 转移 的 两 级 绪 - 
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构图 
[RE] .两 级 结构 图 即 图 13~4 所 示 。 


区 13-4 


例 13-5 寺 例 13-3 使 用 对 情 可 行 法 分 解 此 问题 ， 
[E] 在 这 种 情况 下 义 作 入 已 知 参 数 , 子 问题 的 Гасга-4 
пре Ж 


Li(xi, A)exi-—12x,4x, 


Lal, SA) md rios As 


必要 条 件 是 
Sp =a 一 12+4=0 | 
ks =X, msl 
Slr —#, Am0 
因此 对 子 问 题 1 有 


51A) 6——A 
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НР PE 
ХС) = А, S*(A)m—A 
13-6 РИН m PEERS LL 
EM 
Гм] 两 级 结构 图 如 图 13-5 所 示 。 


Ш 13-5 


二 、 可 行 方法 
XR GTI RE ` y, 
max Ул (x) 


i=l 
Н 5; (xi, хз, ME Хи) 20, Е, 2, N 
жтт RRT [5 MESI EE Bg Lagrange ERES. ARA 
Adr ВИ Kuhn-Tucker dE 


9L, ofe 99: T = 
9х; дк. (98: ) B A = 0 (13.108) 


“gx $1, За» eS n Ады 220 
1 
(13.106) 
+ 378. 


ді; — 


ga s S =0 (13.10c) 
Hig,—0, B ,220 413.104) 
这 些 必 要 条 件 由 xs， Аз» $—1. 2, ==, МНН, 在 第 二 级 
河 题 仍 要 满足 的 必要 条 件 为 
і 
9$, 
其 中 
x 
L= b L; 
2 
因此 


x T 
aL _ g; . 
о З ева s.a 
js 


(13.11) 
ЖЕН, KAP as S, WARE ITE 
(13.11535 


到 可 选取 


- N д T E 
d$,—&| AUS armes 
1 


e fx 
itd А0 ЕЕ Г>0 ， 这 对 工 RACE DED, FE 
BRR — Sk TS RE ETE EL 73 


Р+:. ÇP 99; | 
52-Е А. 
L Pi г) Не А 

(13.12 
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Ae 0, ЖЕЛЕ, M] 57575287, E (13.11) X 
成 立 。 这 个 两 级 选 代 过 程 的 收 你 性 所 要 求 的 条 件 是 子 问题 的 
ЗЕЕ. | 
例 15-7 = 0113-3) Ж.Ж, 5ИЛЕ ЕВЕ, 
LER) 第 二 级 必要 条 件 为 


bi =e 0 
-或 者 
一 一 各 
是 由 例 13-3 得 
$=25—12, mS*-12 
以 及 
x*—x,—12  АМ=—12 
sPt1l—=sP+h(—x,—2)” 
= 
srt ms? (ғ 12)" k<0 
国 此 


= (АА keo 


ШК] 5*=12, ЖЖ Уу Focki ms =0, 8st! 
«125311—5h0, MA h> Ai П 5? =0, 210219 Д 1— 
k0, 


三 、 对 偶 可 行 法 


ТЕ ЕВ УЕ, Е У асгапое ра EH (13.6) 给 
H, eymg kuha- Tucker 必要 条 件 是 


. 380 = 


0L, Of, og. r u 
9х. 9%; (à ) ", LLL 


(13.132) 
ны, S, +з, $,, e, $9). 470 
(13, 13b) 
m SL) n А = je 2, N 
(13.13c) 
Rfg, =0, №; 20 (13.134) 
RE ARR Rx PB. 和 $+y 作为 和; 的 函数 解 央 在 第 二 
人 缀 问题 仍 要 满足 的 必要 条 件 是 
aL . 
дА, ; 
其 中 
^h 
= Y L, 
1-1 
因此 
XL -x,—$,,70, i, j=l, 2, =, N 
: (13.14) 
-在 这 称 情 况 下 可 以 用 以 前 讲 的 梯度 算法 解 出 和 + 
dÀ, ,—k(x,—S,0 (13,18) 


3* 
A13 = АР, ROG 78, ,)? 
Eh k<0 。 ЯН ява, пал 
误 题 是 求 补 大 化 ， 所 以 二 级 问题 是 要 求 极 小 化 。 这 种 对 偶 性 
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HERR- PER, ОЕ UE OR de ВЕК ERR. 
Сіз.) ЛЕ, Иан, Соз 13) 9 ORE 3^ 
IR REGE МН, ХЕ. 
#115-8 对 例 13-5 确 定 第 二 级 必要 条 件 和 梯度 算 医 。 
[88] 对 于 对 偶 可 行 分 解 ， 第 二 级 必要 条件 为 


13-58. 
х(А)= 一 6 一 全 ， 5 (和 一 一 》 


一 工 1 一 一 和 


ғә 


НЯ A*-—I12H xf—xl-$*-12 
HERRE | 
AP t1 mAT AO. — S), Rd 


Arm AH s +) =(1 +)” tek, k«0 


WE, AA ==0 ОАР 1680, RERE 从 最 优 解 4* == 
一 12 处 离开 ,在 俩 13-9 中 我 们 再 考察 其 原因 ， 
115-93 说 明 例 13-8 中 为 什么 第 二 级 算法 不 收敛 。 
[М] ЖАРЕ Lin. AWM Llan 5, А) 
者 ， Жез Af, З их, ШО НАЛ, H 13-х. 


д -二 2x1 一 12 十 4 
所 以 
dL 
xt 7270 
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ХЕ, 对 x, ЖА МЫ A 


Bre 


OL 9L, LL, 


ЕЖА, № Hesse 矩阵 为 
| t —i ] 
. —1 b: 
жт 130—430 ,所 以 五 :在 (А), S * CA) Нас 


ж). LEERT fü S hb НЕ JN, ПАРКИ. 
AXE T Aa- ВО CIE a Ee. 


Ш. 65И 


外 方程 (13. 的 给 凶 的 Lagrange ТАНИ 
一 个 有 趣 的 经 济 学 解释 ， 它 是 由 一 级 和 二 级 问题 的 对 偶 特 性 
产生 。 

考虑 一 个 完全 竟 争 前 经济 的 特性 ， 设 第 ;个子 夭 统 表示 
一 个 特别 的 经 济 区 域 。 假 设 

РОНА да хо BEME ЖАТ ИЕ Р ВУ 
А, 3-4 
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P, VAL ЖМ X НВ. 


Jal 


À 是 愉 第 了 个 经 济 区 域 买 原料 S, y o Br. 


Ри Y AS 
J-1 
才 示 第 了 个 区 域 按 当时 做 将 P,、8， 了 同 外 界 所 有 交易 中 得 到 
мл. Шан, WATR- E Wk, 方程 
《13.6) 中 可 包括 下 面 一 项 


(Rg CX SS 


现在 考虑 第 ;个 区 域 管理 人 员 的 工作 ， 这 就 是 按 给 定 的 
Wihan P, 选择 生产 水 平 x 以 使 收入 L, ВК. БЕЙ 
由 中 心机 构 赫 定 ， 这 个 机 构 的 任务 是 调整 价格 使 供求 相等 ， 
E 


EQ = 739, j=l 2, ез N (18.18) 
IIIA RM Rs GE pa E E ERE 


S «РОУ ЖХ, 此 时 Е,(5,,)==0, ј=1, 2, e, N. 
价格 停止 波动 。 因 为 在 方程 (13.15) 中 


dÀ,,—RE(ÀA,,), k0, ј=1, 2, +, М 
24 E (k 70, j=1, 2, +, NH. ИИ, — 
BEDEA. Ш, ОЯ pikir, m E,2>0, Я 


上升。 类 似 地 ， 当 供过于求 ， 则 E,<0, MATE. 
AAH, PARER ERS HERH RAY 


‚ 384 • 


м 
= у, 


ўні ' 
ШАД X =S yt =k £oce М, ХЕ (13.16) 
中 
А N 
E, (2) YS, —, 
J-l 


ВНЕ. 


习题 与 题解 


18-1 WAE 
minf(x) 
Ва: (х)=0, i1, 2, es N 
EMET {TH SESS Ub L fu 题 是 对 偶 的 。 这 时 
0,00) =0, i=1, 2, +, N 表示 子 问题 间 的 互联 约束 。 
tu] 假如 充 x" 存 在 有 限 局 部 极 小 ， 即 
minf(x)= f(x°) (13.17) 
g(x')zm0, i=], 2, =, М 
МЕН Lagrange B 37 
L(x, ))=f(x) +A gD 
ЕНЕ АХ 相 联 结 的 2"， 在 和 “的 某 个 区 城内 存在 L(X ,A) 
AS S IRE JX. 
L(x*, ÀA)—minL(x,A)— НСА) (13.18) 
X 


其 由 对 工 ВАЕ, x'XIRETXCTxMEDRM, ФА == 
A^. Wü] x=, ХЕР d g(x)= 0х Жтт, MH H 
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C13.17) 积 C13 18) 5X 7 


min L(x, А) = min F=f =H (AF 
xe x 


nz 
Н(А) = тів L(x, A)&min LO, А)= НСА?) 
x ХЕХ 


因此 
Н(А)<Н(А*) 


ЯНО) АЖ. РРС) ехе BURN, АС 
和 二 级 问题 是 对 侦 的 ， 
在 对 偶 可 行 法 中 ， 久 是 二 级 问题 的 变量 ， 并 有 


dH(y)-dL(x*(À), A)= 2) "ал+ (EYS "dra. 


e əf dgra 17 dx? 
в(х*)та).++| L6) 27980 J ал 
但 是 ， 由 一 级 问题 的 必要 条 件 ， 肯 定 育 
| Of cus Og, uL 
ax +5 )=0 
所 以 
ФО) дбн) = 
АТН, EdHQCQO))»0, B ЖП 
dag) 
其 中 上 >0 。 按 离散 算法 的 形式 ， 这 个 表 法 式 可 写成 
АРА Ág(x*)*. À0 
15-2 ”如 果 我 们 把 可 行 分 解法 和 对 偶 可 行 分 解法 组 合 在 
一 起 ， 并 旦 在 第 二 级 求解 9, 和 入 ,二 者 , 那么 ， 对 这 两 种 分 解 


* $86 * 


前 子 系统 的 必要 条 件 求 解 ， 会 有 祖 当 大 的 简化 。 这 种 方法 称 
АЖ, АПЛ Но, 
ГА] 由 方程 (13.10) 和 (13.11)， 一 级 必要 条 件 为 


а Ө. {дан MELLE 


OX, Әх; ax, 
L 
Su Ts $1, За» os Sr, Sa) is 220 
219: =0 Ш, 220 
可 以 对 к: (А, Sing, (А, HEEL, LAUS EIE 
aL ob. _ 


es. 0 дА, 一 Xi — $, =0 


im 
г“ 


ВЫХ, SQELA IBRETEDXpOR ИИЙ E, ЖОЙ 
ЖИ, РАДНА, ВЕРДИ АЕ 
中 均 采 用 它 。 _. . 

13-3 ЖЕНИЯ Л > EL 1272 b e HR AE TIN 
== 2 的 问题 。 

[St] 在 图 13-6 中 说 明了 用 每 个 一 级 子 问题 和 二 级 子 问 
ВЕР. КЖ. НА! 29.58.83 
w HCAP $1), Xx;,02,852), 8,042. SHAX CAL, SDAR 
立 解 出 人 餐 个 子 问题 ， 然 后 将 这 些 子 问题 的 解 代入 到 二 级 方程 
h, HAAR, APH SPH, бре нах HRAS 求解 
FELES . - 


НОЕ, Г 


ХА} 


BD 13-6 


BET! 


154 FEA ERRI REE, #Г t 4 TE 3 
示 在 图 13~7 中 ， 与 第 了 个 工段 有 联系 的 变 量 为 
X 三 为 进一步 加 工 向 其 它 工段 输出 的 产量 。 
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Yi 二 不 要 求 进一步 加 工 的 产量 。 

出 ;一 为 生产 Y 和 X 所 十 的 控制 。 

$s 一 从 其 它 工段 的 输入 ， 

给 等 一 个 工 卜 确 定 目标 函数 ， 它 将 使 整个 工厂 的 利润 最 
大 。 力 对 惕 可行 耸 解法 并 设 全 部 六 个 工段 的 工段 模型 必 下 式 ， 
给 出 

X,=T,(M,, S.) 
Y,—U,(M,. S,) 
НЕМЕ, неко 


max Y f, (М, Y) 
我 们 设 工段 之 间 相 互联 系 为 


и 
S= Y C, X, 


1x1 
RB C,,[e,]—T0. Г, М 
у р |. EXS; 
Ci” 
0 KH 
[M] Lagrange ИЖ 


^ 


LMM. X, У, S. D= у nas. Yi) 


(=i 
* 
zi C, ;X,—8, J 
P 


r 


LM, S. у= Y EALE UM.. S,))+ 


x1 


| 
H 


T 
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к 
AT Y CrsTs My, $5-15. | 


Е 1-1 | 
-现在 定义 
x 
PI Y AIC, 
4-1 
ЗЕН 
FOL SOS tM, Ч, (М:, $,)) 
38 


L(M, $, 2)= . Ме, So А) 
i=l 


JUBLQREGMLBBH:qmEÉ. FAM 
І,.(М,, S A= fi (M, Se) РУТ, (М, $:)—213: 
i=l, 2, =, М 
Fi P ЕЖА ХВ. ДЕН, 的 成 市 ， 
ХНА, ТЕЖЕ АМ, TS, DURS. 
УМРЕТ ЕН НН ИЛЕ ЕШ СИУ 
13-5). А 
13-5 为 了 使 整个 工厂 的 利润 最 大 ， 推 出 习题 13-4 中 的 
ЕТЕН gU, 
INE]. Ж ЕЛУМГЕ EAE k a 61,2, М 


У 


$; = 
- РД 


C. X; 
1 


x 
mA P = Y С.С. Вени, -Bjel 2... N 
£21 . 


ЖНА, Р. ЖЕБЕ, ЕХ 
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Е,0)=5,— Y C X, 
Jul 
Ним, $, МАРА, M 


E, (3) 98,0))— У CesT A) 802) 


f=l 
导向 梯度 算法 ， | 
AMPURAPERREQQT) ed. 2, es N 


其 中 &>0, HY М2, ROHRER RARI НЕ, 
13-88. 


MENS T 
| - 
| 


图 13-8 


338 用 对 偶 可 行 分 解法 求解 问题 ， 
min xes +m? 
Ні x,=—z*,+m 
FLETES 
iE] 这 个 问题 训 以 象 图 13-9 所 示 那 样 来 分 解 。 
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НВ Lagrange ИЖ 
L(x, m, $, À)=x1+<x!)+m* + 


A (x i — S I) +A (x ,—S,) 
将 约束 代入 消去 x， 得 出 
L(m, $, À)=(—S+m)t+(S,+BË)° 
т А: (5 т-5,)-+4 (5-5, 
然后 有 
L (Sr mp Ap 42) =(—5, Em mt 
AaS HAm AS, 
LS, à Aa)= Gu E)! CA,S,-A4S,- 8А, 


并 且 | 
Sr = —2(— $1+т)—5(—А,=0 
аа. -2(—S5,-4-m)--2m--2,— 0 
MDC RENE 0 

出 此 得 


m) A, 
S* Q2, + la 
SKAJ= (а Аа) 8 
第 二 级 梯度 算法 由 下 式 给 
ААВ. (AP), R0 


LU 


АА HRE, CA), Е>0 
其 中 
Е (А) = —S,-—S mS =A Hk 


Ея, —8 =S EAS, — 34, 
M E (A)=0 if, BA mh, xI2S,, S EQQ)-0H, f 
A =0, x1=S,, E E | 

m*(A)=0, 510, S10) 7 


LE 


15-7 对 习题 13-6 证 明 满足 二 级 算法 的 收敛 条 件 。 

[证 ] 由 对 偶 性 ， 因 为 一 级 间 题 是 求 极 小 ， 所 必 二 级 癌 
题 要 求 极 大 ,如 果 每 个 一 级 的 子 问 题 最 优 解 对 应 于 局 部 极 小 。 
则 二 级 算法 收敛 对 于 子 问题 1 Hesse 矩阵 为 


-OLr БЫЛ 

9571 Ә$дт г 2 72 ) 
| Ө» аЬ) (—2 4 
| дҥд5, дт? 
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XTXRE2UM, НӘ ЖЕҢ, AERAR А STOA) um 
а L,(S, m, ИЕ. XP FEED, Неззе н 9 


АЦА) LSe Мл, Budd, JE 
13-625 H ig SC p e 

15-8 ЖЕУ З ВА ШИЛТЕШИ. 

Уи 

rU 

1. ЖА, 1035€ P0. 

2. PREL: ($, m М, AD. 

3. 极 小 化 La(Ss; АР, AD). 

4. VRELOPID)HRE,Q). 

5 dimax Е.Е (А <e ДЕНЯ. 

6. ЖАНА", 

т. ріж 2 Р, 

13-9 用 可 行 分 解法 求 习题 13~6 的 解 。 

CRI НРА, ВЕРЕ BJ BR Bj Lagrange m 
为 

Lm, S, .S,)=(—S, bm) Би 


A (— S i+m—- S,) 
has 51, S) GS ti td 58-5.) 
:必要 条 件 为 


СЁ: _ _ _< 
ЭЛ S,Tm—S$S,—0 


全 一 2( 一 Si 十 办 十 2m 二 am 0 
9L, — -$= 
DAs Saté 5, 0 


кашка E: 
m'($)—s, +4» 
A1(S)—2s,—4s, 


ЖИ, HFT, DERSAGRTIUENOAIQ. ЖИТ 


分 解法 不能 用 来 解 这 个 问题 。 
3—0 ШИЯ Ен, Женен л, 


я 


НЕНИЯ ЧР ЕАН НЫЙ H MN, TE 
Wie. REALEN- тор XC ER Й 


分 方程 的 最 优化 ， 
8] зан 
min fie age TAE 
mx) UH (x) Tnm (x) idx 
HA 
3 a _. 


ax? 


т 
НЕ S TE 
ug=(0)0, а(1)=] 
如 果 我 们 用 长 Ax MERKE, ИНН 


N ， 
min ит), Е, 2, 56, N 
Hi, 
1-1 
Hf 
тя 8,784 -, |= 
axl AX Ах "i 
* 
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почаш 720 m (АЖ), $1, 2, "=, М 


其 中 。 "e ios н йр ep, PE HE Reg 


ЕАН. 
ERREP, MA (UU MM) 


HASAU-T(Ax)!MEF 


其 中 
—2 H ` 
1—2 1 
1—2 1 0 
A= 
T—2 1 
0 ME 


Fafo, 0, 0, =, i] 
HAEREA ЕХ А ЛЖ дели AZAGA, ННН 
fk 下 分 块 来 分 解 该 问题 是 方便 的 ， 于 是 
А, 


E ET 


Жиз] zc арду НН РЭР НИЕ. 
ЖБ КЕ [15 тег, 1971], НЕА, 
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кт, ХИ АННА ЖИЕ, VERIS 


ERARE. 


13-11 


且 使 


15-12 


doct Em 


ЖА: iu RS Od 
min(x,— К)? +m? 


m 


ау=--х{}+2т 


АП] 13-1 ИЕ C R EB ERR, Я ЕЕ a: 


. Ш? 


13-13 
13-14 
13—15 
13-16 
13-17 
13-18 
13-18 


15—20 


15—21 


ЛТА ДЕ ЕДЕНД1З-11.- 

用 习 是 13-2 中 讨论 过 的 松 驰 法 解 题 13-11。 

用 习题 13-2? 中 讨论 过 的 松 驰 法 解 感 13-6。 

对 于 是 13~15 精 和 钨 提出 计算 过 程 。 

HUS BL d ЕЕ RER 

Я STET AME E 13-10, 

H3 8113-9 pierde SE АК ВОЖЕ 3-10 
Ж. 
用 一 个 实际 例子 及 精心 定义 的 各 变量 来 解释 问 
是 13-10 的 意义 。 

BAHA EIU ARRA АО FALL SEES 优化 问 
м, 
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附录 线性 规划 


这 个 附录 简 重 地 讨论 鳅 用 规 划 问题 和 解 这 类 问题 的 昔 纬 
TEE. 。 关 于 线性 规划 有 大 晤 的 文献 ， 些 处 只 能 提供 理论 上 
的 一 个 简单 轮廓 。 对 于 理解 非 线性 规划 的 算法 ， 线 性 规划 的 
知识 是 十 分 育 帮 助 的 ， 因 为 非 线 竹 规 划 的 很 多 算法 都 是 以 单 
纯 形 法 的 推广 为 基础 葛 ， 

在 线性 规划 中 ， 有 只 标 函 到 和 约束 方程 对 于 自 变 量 来 谎 都 
ЕЕ. НЕ 


О) = (е, х)=стх (4.1) 
Янс x c En, 约束 方程 是 
Ax<b (A.2) 
xz 


и зл", А тхи ре, ТЕТЕ pk 的 集合 
ЕЖЕ М={« хе", Ах, х20}, REANA 题 就 在 
РК Дх) M FRE. ИЕ л, ЖИ Е 


max f(x). 


ЕКСА. 2) т 620, ДИКИЕ ИННА AR 
ЗЕЛ М. ХЕ, 0см, TEM 非 室 ， 因 为 任意 线性 规划 
问题 总 可 以 变换 为 这 种 形式 ， 所 以 我 们 只 限于 讨论 规范 形式 
ЕЙ, ЖЕЕ ШЫЙ 4 一 bp 一 Ax， 将 不 等 式 约 束 变 
ЕАН, ВЕСА.) 

Ax-u-b, x, uz (4.3) 
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4 B-[A, L], y-[x?, ити, spud ym0idgBy- 
b 就 是 (4.3) 的 一 个 可 行 解 。 这 时 所 有 可 行 解 所 成 的 集合 可 
ИД ХЕ Y={y]y c EM", By-b, yz0), WRA ЕЕ с 
Ню 258, FT S T JEE c, TRR МЫ 
题 改 述 为 max(c， y) 


А-1 一 个 投资 公司 将 资金 投入 不 动产 和 油井 。 假 其 
每 项 投资 的 资本 量 有 一 个 最 高 限额 ， 分 别 用 5 b, ER. 
设 可 用 于 投资 的 整个 资本 景 不 超过 В, 。 问 在 利润 与 А. 
有 线性 关系 前 假设 下 ， 如 何 使 读 投 资 公 司 的 总 利润 最 大 。 

[LER] Ex. s 分 别 代表 在 不 动产 和 油 EZ; 面 的 投 
Wt. НЕХ, Wo. Xa, Di, ba, b.220, 并且 对 投资 的 
约束 为 oxcx 51, Ох: bu, 5х, +5.,. 8 Ка, 
х) =c сах, 代表 从 投资 x， х, 所 得 的 总 利润 ,问题 
就 成 为 关于 xi. x, K (х,у, хам, ВИН SIE Lg 
给 定 的 约 东 。 


e 


] 9 
b=[5,, 5b, b,]" a= 0 1 | 

-1 1 
可 行 解 集成 为 М={х| хе E 1, Axab, x20}, МН 4-1 的 
HERRAR, BEC: m 2,0, 774,85 GR ER fona, Ха) = mS 
HEAL. ЖЕ А-1 中 的 箭头 方向 穿 过 这 些 等 值 xL foni, 
хун ЕЯ, АЯ хр, В, 5,17 最 大 
值 ， 这 时 f(xt. x.*)—2(b,—5,) +45, 问题 的 景 优 解 由 
хещ, BF TIR EER ЕЕ БЕН ЯР Bor АЕ АЧА ZU zb P= 
JEUNE. PARRES ЯРКА рН, ç Fu 
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资本 投入 不 动产 。 图 解 记得 的 最 优 解 x* 与 资金 "的 这 一 分 本 
法 是 符合 的 ， 


Bj A-1 


例 A-2 某 农场 主要 求 为 家 畜 每 天 配给 的 食料 中 ， 包 会 
А, B, C 三 种 养分 ， 它 们 分 别 至 少 为 4、12 和 2 单位 ,有 
两 种 饲料 可 供 使 用 ， 每 一 种 每 单位 重量 所 含 三 种 养分 数 恕 下 
ABER. 


养 分 


B 6 2 
© i Ü 1 


两 种 饲料 每 单位 重量 的 价格 分 别 为 1 和 2 货币 单位 ， 试 求 满 
中 养分 要 求 的 最 廉价 的 食料 配方 。 
[W] xu. х, 分 别 代 表 食 料 所 食 饲 料 1 和 饲料 2 的 
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数量 ， 从 实际 考虑 可 得 xu 51220, Talk ECL ЕХ ЗЕЛ; А 
的 需要 ， 应 要 求 x: 十 xz 六 4。 对 养分 恬 和 人 的 类 似 dil 
Н 6x, 2,212, 02 /-+x,2Z22, 6 


b=[4 12, 2] -| 2 | 


ТТ М (хіх e E*, Axzeb, x20). Z Е A—2 ip 
НН. BHR Я Я Аха, ха) =, 2х.. F 
- FERCHER 4-2 p., НОЕ, fon, 
РИ, EAE к*=р 达到 最 小 值 。 食 料 的 最 优 
配方 为 x? 二 2 单位 ， 划 二 2 单位 。 


Xi 


Ta e 


B A-2 H A-3 


ЯА-5 жа А-3 пинка 
Маеҷ{х|хеЕ°, Ах<Ь, х0}, Ж 


_ r a Í \ 
кеа as t] 


TOR Г, 5.) =, х ЕЖЕ M Lim. 

[8] 如 图 4-3 Br, GMETAD, валы 
ЭТАН f(x. x.)— AER, Г, Xi) EBBE xi. xabi 
有 限 值 处 获 很 最 大 人 入， 因此 ， 这 一 问题 没有 有 限 的 最 优 解 ， 

便 A-4 FER O t= Hn ПЕМ ERR 
RENE, Ма А-4 的 阴影 区 域 给 出 ,试图 解 这 一 问题 ， 

[R] f(x, moB НОЛЬ АТС Aarh, WRA 
HESTER, i хун ЕР, ЗЕ x*=[0, 2]*3A 
HEEM brki. A, =o 2]7 是 该 问题 的 最 
АЖ, RIAH., SEMEEN, 但 仍 有 有限 的 最 优 
#. 


E А-4 


一 、 基 本 可 行 解 


设 由 Ах ЗЕ ЗЕ ЯЕ, ЕРЕ 
Б ВУ Ву=Ь, УНН ИИ ©з 
f), №620. 等 我 约 东 By=b 可 以 写作 
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b, 1+" tb, ma nmn =b; 
: : : (A.4) 
bmi + Panis nin = ba 


HP 5,, X8 mx (ин B EHE TER, y, 和 
b, 分 别 是 向 量 y 和 日 的 第 /个 分 量 . EDA R R i A 
mtn DRAE yis t mas BJ m ТАК 7 ш. ШЖ 
信任 意 # 个 未 知 数 为 0， 由 (4,4) 式 则 得 m 个 未 知 数 的 mm 个 
方程 。 不 失 一 般 性 , RAER yix. e Yar 和 Ут 
=e Ymen = ДИАЛ ЭИ 


(А.5) 


ГЫП 


El | bin 


"" | ban 
RELE., 并 因而 构成 ET ВН, ШШ (A.4) 
而 得 唯一 的 y，…， 知 什 ， КН ЛЖ, НН 
Уі tU ya MARRE, WRH B, REmxmiBH, E 
НЕЕ DARA R ES ER PECORE ER Н, UU] ЖЖ RT 
ИЕР Y-COB)T, (0727, AKAMA, ЕЖЕ 
总 是 可 行 解 ， 因 为 可 能 有 y;<0, 1jam, МИ, WEY; 
љо 对 所 有 的 1 志 i 所 m 成 立 ， 称 这 样 的 基本 解 为 基本 可 行 解 。 
ЗЕЕ, rey xm, Hy0, Ж y RENE. М 
ар РЕЖ о, ИЕ. 从 一 个 给 
定 的 基本 解 开始 , 令 m ЛЕДИ, Ш — 
个 非 基 本 变数 取代 它 ， 就 可 以 构成 一 个 新 的 基本 解 。 为 此 目 
AmA Bn ELERIA, MAERT о 的 基本 
atus Na dE. 
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Ery -tE A HIA (БЕ), IX AE ds CM 
3120, i=l, "ue m, 31520, i=m+l,--, mtn, Xd 
BUR b, i=1, ++, m ETA, НАХ Ее 88, 
xk Bb UREA E b! = [bip o Da 3828 78 


b= 》 2, Rh IRE D! 被 用 作 基 向 最 ,因为 9 是 (4.4) 


式 的 一 个 基本 解 ， 我 们 有 Y sqb! 一 5 。 使 用 b 和 b! 的 这 些 
E71 


表达 式 ， 得 到 


у yib el и uae 


ўт] fal 


或 者 


Y 02-02, вее =b ` (4.8) 
+=] 


Bf, ЗН; 020, ШРИ PC У? ВА, @ 20, 
=, c, m, КАНЕ 在 b 前 表达 式 中 占 的 成 分 就 越 来 
越 大 。 

fE(A.6)xX 3, 设 y1/4,—min(A0/2., , Br A. om 
0}, 196 o= уль з, ПЕСЕН 的 系数 为 0， 亦 即 在 
АКА. р, bii) mad. ША denk, 
A т ЗЕЯ SB Н CA 6) mg dE 0 系数 给 出 ， 那么 , yl 就 
是 一 个 由 y* 得 到 的 新 的 基本 可 行 解 。 下 列 例子 为 上 T 讨论 
的 代 兹 过 程 提 供 了 一 个 凡 何 解释 。 

МА 考虑 线性 规划 问题 ， 其 矩阵 
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Ü 1 1 Ü °- 
zr 1 0 1 Q 
l —1 90 6 1- 
&—[6. 10, 6]7, НЫ М, ЖЛ y" [45 6, 0, 0, 
871, SIE yt рр s Ia pr E dbi) RIS. 
[R] ЛЕА > В, ВТА], у=[х", чт], 
得 到 


haul 

А= 1 L о [Xie 过 一 [人 u, nu. l 
Li —1 

包含 所 有 满足 Axssb 的 向 量 xX М, 在 图 A-5 di rng 

Ep. 


Ei А-5 


ЯЖ, ЕЖЕ Му =[4, 6, 0, 0, Та, № 
我 们 注意 到 Yi 一 4 %s 一 6， 这 相应 于 图 4-5 所 示 的 М 的 顶 
AP. И y! pH и, mu m0, ВЕРЕ ispa 是 jb5 一 [0， 
1, т, b*-[1, 1, —131*füb'-[06, 0, 11*. 3 Я 
b'—-—b!--b*-F2b5, b*-b! J-0b' —b*, 
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型 在 假定 我 们 将 b: лаат, хижина 
ПРИ АШЖШЕНЕ b1，bha，Bb5 中 消去 一 个 。 为 了 
决定 究竟 应 该 消去 哪 一 个 ， 我 们 帮 b? HD EXRGUAGURCA.6) 
式 ， 以 得 到 - 

(4—8(—1)]b! -[6—8( 1)]b? -T8—0( 2) 155 --0b* =b 
这 时 ,通过 直接 计算 ,有 min(y1/A44) = min (° ESL 
.再 令 0 二 4。 得 到 | 

8b! 4- 2b? -- Ob? -+ 4b? —b 
于 是 bs 被 消去 ， 并 得 到 新 的 基本 可 行 解 
y'!—[8. 2, 4, 0, 0]T, dE y! тх =8, xx 一 2。 这 相应 
МАО 

如 果 是 将 bt 引入 基 疝 量 集 合 ， 并 用 上 面 给 出 的 b+ ЖЫК 
RUD, 得 到 


[4—8(0 ]b! 3-L6—8(0) ]b? -£8—0(-—- 1)]b* 4- 6b: —b 
这 时 min(y1/A,,) e min4--4, BZ 8 二 4， 得 到 
0b!+ëb*+12h" + 4bt =b 


于 是 b! 被 消去 ， 并 且 得 到 新 的 基本 可 行 解 y* 二 [0，6,，0， 
4, 12]7, 在 y? 中 ， 7E х,=0, x,—6, W 3 ES EM А ТЕ 
AR. 从 图 4-5 {ПЕОН ЕН. АГЕ 
ЖЕ, НТА М dE ТД SE ЕПН 邻 的 一 个 
JUR. M 的 每 一 个 顶点 都 联系 着 一 个 基本 可 行 解 ， 而 HA 
个 顶点 都 可 以 通过 计算 与 之 相 联系 的 基本 可 行 解 而 每 到 ， 
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二 、 单 纯 形 算法 


单纯 形 算法 是 Dantzig 为 求解 线性 规划 问题 而 建立 的 ， 
我 们 注意 到 在 例 4-1，4-2 和 4-5 中 ， 最 优 解 都 是 Ф M By 
пм. ЧЕ ЕА, ЖАМ EDAH, НЕ 
优 解 存在 时 ， EDAM ЛН, НН, Е 
线性 规划 问题 ,可 以 通过 计算 目标 函数 在 M 的 顶点 上 的 值 ， 
并 瑟 比 较 这 些 值 来 确定 最 优 解 .单纯 形 算法 是 实现 这 一 程序 
的 一 个 有 效 的 方法 。 

我 们 已 经 讨论 过 一 个 代数 过 程 ， 通 过 与 顶点 相 联系 的 基 
Жат, MM 的 任意 一 个 顶点 移动 到 一 个 相 邻 的 顶点 。 
单纯 形 算法 的 一 个 构成 部 分 ， 就 是 使 用 这 一 过 程 产生 MH 的 
新 的 顶点 ， 以 试探 求 最 优 解 。 单 纯 形 算法 不 计算 月 标 画 数 在 
M 的 每 一 个 顶点 上 的 值 ， 而 是 通过 选择 某 些 有 希望 的 顶点 ， 
更 简捷 地 搜索 最 优 解 ， 为 确定 性 起 见 ， 我 们 假设 E R AK 
JOE M 上 的 航次 。 单 纯 形 算法 只 有 当 f(x) Bus En 
信 有 项 望 至 少 同 已 计算 过 的 项 点 上 的 信 一 样 大 寺 ， 才 产 生 这 
个 顶点 。 

正如 在 开头 一 段 中 所 述 ， 我 们 假设 线性 规划 癌 ШЕ 
max(c, y), y € Y. ik y? 代表 初始 基本 可 行 HE. y 是 利 出 
AORA y" 求 得 的 新 的 基本 可 行 解 ， 那 么 计算 在 点 y 的 民 
An BUE АЛУ 


(e, y) Y, 0л) +Өс, 


$21 


=(¢, y*)—8(2,—c,) (4.7) 
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BE zy 一 Ул uc, BERATAN N: 
$=1 

І. нЕ fd m+n HEE д, 204-0. 
ЕТ: A50. 4 -—min(y? fe), 其- 
中 的 nin 是 对 满足 4t nO MSE Үй Ж. RESO 
290 Я 51-94: 220, i—1, -, m, ВЕРЬТЕ 
成 立 。 这样 选 择 8 ПЕН Ж у!, HORA. НЕХ 
有 m 个 非 负 和 耸 量 ,因而 这 是 (A,4) 式 的 一 个 基本 可 行 解 ,从 方 
程 (4.7) 可 知 ，(e，y ">>(e，y")， 尖 此 得 到 一 个 新 的 基本 
司 行 解 ， 在 这 点 上 有 更 天 的 目标 画 数 值 。 

H. WW а, —c 20% mhl 5 mas 之 间 的 所 有 的 
j SX. у 是 最 优 基 本 可行 解 。 为 了 证 了 时 这 一 点 。 
УКС АННЕ T AER НМ, НЯу ШЖ 
(4.4) 的 基本 可 行 解 ， 所 以 . 


b= Ўы у» Ye | 


#=1 


= -j zl ЖОЛ |= р yb‘ 


=} del 
BFD Pol, en m ВНЕ, ан уре Y ayo 
3-71 
Е e moy, jamt, ns min 


Z,—0,, 1=1, +, m, Ы 一 
Soer Jri Yen 
43-1 $21 
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= YÍ у ун: Y ste 
f=1 -j=l EET 
ЖЕШ, FFA A) GINE RGESRI у, (с, pa y?) 
Amy 是 最 优 解 。 

K. Emh Mmt ZR EE jo tE 19 270-0500 
ME Ai 80, 1=1, се, m, 2 W, y$—02A,,:20 ， 因 而 
对 于 所 有 的 620, y 都 是 (4, 人 的 基本 可 行 解 。 尖 0 一 十 
09， 从 (4.7) 式 显 热 可 见 无 限 地 增 大 。 因 而 该 问题 БЕЯ ИГЫ 
ЕК. 

现在 很 清楚 ， 上 述 方 案 产 生 (.4.4) 的 新 的 基本 可 行 解 ， 
使 得 (ce，H 的 信和 是 逐步 上 升 的 ， 如 提问 题 有 有 限 的 最 优 解 ， 
.在 有 限 次 选 代 之 后 将 至 少 求 得 其 中 之 一 。 ЖЩ, HAARE 
:种 情形 ， 郑 时 近代 可 以 停止 ，。 


三 、 单 纯 形 家 


REEM A)BUAE E REIHE y. Sb). joi. n. omi 
SÉ у‘ Ен. HOS. Hm 


b = А, ,b! }°=0, 1, бе, m+n 
2 


-计算 系数 ag Rihbt=b, Wikis ИЛЕМ 形 表 的 
:ЖА-1 中 。 用 这 种 表 作 为 留存 单纯 形 法 所 涉及 的 各 种 量 的 一 
利 适 宜 的 方法 。 

第 二 步 查验 单纯 形 天 最 后 一 行 葛 元 素 。 如 果 i с, 
HARAREY, Wy’ 是 最 优 解 。 然 页， 如 时 在 m--1 和 和 


< 410 + 


&А-1 ВЕ 


РНЕ i bg oce bi c asa pmen b 
bt Ац А13 Азщ+а А10 
| 
bm Ami Ams ÀÁm.m en Ато 
Lcd 
| m 
z | 21 TEPHI n Em+n 
i РТ! | 
С i36] = уе: wr Zmen—Cm4n 


mèn REA jo W zs cnm Diem Г, Яр 
ВУЗЕ дало, PEH UR Airo, domi. +, m, MERA 
ЖЕК. 

MEH 22 —cr CO НЧЕ, Asso 0. WARN 
可 以 或 得 (4.4) 的 具有 较 大 通 数 信和 的 一 个 新 的 巷 本 可 行 解 。 
实际 上 ， 合 理 的 应 是 选取 使 2:0 一 cro АНКА Л, 
因为 这 样 的 选择 可 以 减少 为 求 得 最 优 解 所 必须 的 选 代 次 数 。 
y! 104 E XE vi—yi—-0Ai:o =L com. yia ==0, H- 
н 


b 
Ө= тіп Fi 
Яр + а> Aria 


其 他 分 量 为 0， 信 po 是 一 个 使 得 yho —02 5 as —0 R, 
我 们 看 到 同 у! 相关 联 的 基 10] BE E bi, i=l, +, m, (š: 
Po) n b/ 9 ЗЕЕ b 取代 原来 的 基 中 前 bs。 现在 可 
以 计算 与 了 + 相关 联 的 单纯 形 表 。 为 简化 玫 示 和 起见, 设 pa m= KÉ 


"AMi- 


ху, ШЖ, e ‚ VU 和 һ' “组 成 新 的 基 。 


ARE b* 可 以 写作 这 азана а. TER 


= у 3 i hi) goab?’ 


并 训 以 将 byo= Y 411ob! 改 写 为 
$=1 
1 V ALERT, 1 Р; 
b ‚зз A13g h ° 


将 这 一 表达 式 代入 到 b* 二 Y habt, 199] 


$71 


"TN P? + A pio 
DE inept E 
+ Ул 
1-22 


比较 (A4.8) 和 (A.9) 式 的 系数 ， 得 到 


и 
5 ij, 
130 - | 


A15, i=j] 


ИУ, fE 


(A.8) 


(A.9) 


(.4.10) 


X BUSCA. 10) Ж#Н ВВ y! 相 结 合 的 单纯 形 表 ， 
Mun РИН dpi ded у! ERRER, Ж 
是 该 问题 没有 有 限 的 最 优 解 +? 这 两 种 情况 下 选 代 痢 停 止 .出 现 
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PIRR ОТАК КОЗЕ, име. 
ЯА-6 对 于 例 А-1 中 提出 前 线性 规划 问题 ,假设 с = 
2, e,—4, br>b >b, „ АНЖЕ. 
[R] Уже 4-6 НЕ DOSE AN, 并 且 给 
Hi T Ede f(xi, хо) 2х4, 的 等 值 线 ， 使 用 例 А- 
1 的 图 解法 ， 我 们 看 到 最 优 解 是 x* 一 [ba 一 bz b 1", 


| 5: b, 
№ А-6 
这 一 问题 的 约束 不 等 式 可 以 写作 
x <b, 
Xx, 
x, xs 
ВЕНЕ K ni. uz, ш. ИГ ХЕ Lu ity 
жи: b, 
x Fu, =b, 
Xit xatta =b, 
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АН, ym [Xo ж. №, 8o Ша], RILE y* =[0, o, 
bo be РЯ, y" 满足 方 а Ву" -ь, Rp 
b-e[b5, ba, b,]". SEXE EE us us. vu, ВЕН 应 的 
Ji E(b*—[1. 0, 0]7, b*-[0, 1, 017 , b= Eo, 0, 
ПР E? 的 一 组 基 . Ям, м, b* 是 E, ВИА 
14. 所 以 系数 和 1y 可 以 通过 观察 得 到 。 Es y? AAR HE. Ж. 
形 表 如 下 ， 


X 向 Б | b! b? Ъз bs bs 
b3 | 1 0 F 0 0 
b: 0 1 о 1 0 
bs | 1 1 0 0 1 
z | 5 9 ù 0 | ü 

e [o [FR o dos doo 
NEN | 


РНЕ, z,—0,5—2«20, л,—с,=—4<0, 
ня zz 一 fa< zl 一 1， 我 们 引入 作为 新 的 基 HE, ЖЕ 
ха 成 为 进入 变数 ,下 面 确定 离 去 变数 ,因为 6b; 沁 4,， RNE 
0-—min(b,, ps) 一 pa， үї=[0, bs, b,—5,, 0, b —5, 1” 
RAE yl m 8,=0, ЮЕ и, 是 离 去 变数 。 

НТУ RUIEGETE х, m 和 as， 新 的 基 疝 最 是 
*=[0, 1,1, Де, bs 一 [1 ， 0, 017 和 bs 一 [fo ， 0, 1]*, 
ХРЕН k: Я b!—0b'-Fb*-Fh* , b*-b*-r0B*—b*, 3X. 

给 二 了 系数 A Нин, иги. 
ER z eSa, ВИЗА Р! 作为 Я 
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HE, T£ x1 成 为 进入 变数 。 下 面 如 前 边 那 样 确 定 离 EE 
Ër. EA b >b >b, ЗАП d 0=min(b,—b,, 5.—-6,)= 
bi—b,, 所 以 二 [bs 一 bz br, В: -8., 0, 0J2, ЖЖ 
НЕХ. 

现在 ， 对 于 Ежа f£] Жу*=[.-8,, b., bb. 
0, 0j*, A x, 5,—b,, x,—b., EU xxl, x,=xt, 


这 里 用 单纯 形 方法 搜索 的 路 径 面 示 在 图 A-6 中 ， 


Wi. УВЫ 


ТААН а н pk -— st EE Hq Yulia] E S3 Z 8 
关联 ,我 们 称 其 中 的 一 个 为 慰问 题 , 另 一 个 为 原 问 题 的 对 个、 
假定 我 们 取 和 前边 引入 的 求 最 大 值 的 问题 作为 原 问 题 ， 也 就 是 
Ятах(с, x), Е НМ {хе Е”, Ах, х0}. ЖАЖ 


ЖАНЕ Я ED E min(b, z), Suh N(zl zc E^, Az 
c, 220}. 我 们 注意 到 ， 在 某 一 个 问题 中 的 每 个 约束 ， 对 
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З ТЬ, БШШ BL b PE SHE 
JFBIB0JE I, оля, MBURSESUMCY VB Б (ZE JE 
HEPES, АНЕ EIER). 

这 两 个 问题 以 及 它们 的 最 优 解 是 联系 在 一 起 的 ， 从 一 个 
问题 的 最 优 解 得 到 另 一 个 向 题 的 最 优 解 的 全 部 的 信息 。 在 本 
般 中 ， 我 们 借助 于 例题 来 研究 这 样 两 个 问题 的 相互 联系 。 

Bi А-7 ЕЯ шах (с, x)«&min(b, z) 


. . [XE] 注意 到 220, АПН 27 238 FJ Eš du MUR 
Ax<b， 得 到 zTÁx«;zTb—(b, z), Н, BERE X0, 
并 用 x* НЕ ИНО Е ATzzc, 15 3) XTATZIXTe— 
(с, x). VEA AR RS Sr, (С, х) XT ATz—2" Ax 
€(b, 2), ЖЕТВШ ХЕМ, zc N 成 立 ， 从 而 得 到 所 要 求 
mam. 

Bi A-8 ЗЕ SURGIR IS] ини, Я 
S ULIS А TARATA RESERVAS 
Жи), ВНЕ ЛЖ EAO. 
_ [AE] 引入 松弛 变数 u=b 一 Ax>0 Ri v=Azz—c20, 
将 原 间 题 和 对 偶 回 题 的 不 等 试 约 东 改写 作 Ах-ри=Ь 和 A”z 
++=с. 5 g(z)-(b, 2) 3E Æ JE b—Ax-Fu, W 9(2) = 
z'Axdz*u, 计算 g(z) 一 fx) . KB у(х) (е, x), 得 到 
g(z) Кх) -z*wtF (Az—c)"xez'ud- v!x ДИ Шх= 
хэ < 一 zx 时， 即 分 别 为 原 问 题 和 对 偶 河 题 的 最 优 解 的 情 
J, ЖШ Bl A-T, Я g(z*) —f(x*)-0, ， 即 (ze)zus + 
(v*)7x*—0, ухе, z*, v*, u*z0, 如 果 uuo 0(v > 
0), nj z,*—0(xi-0), 这 就 证 明了 所 给 的 命题 。 

一 个 线性 规划 间 题 可 以 叙述 作 原 问题 的 形式 ， 也 可 以 叙 
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述 作 对 偶 了 问题 的 形式 。 这 一 选择 的 根据 是 计算 的 效率 。 一 般 
说 来 .约束 的 个 数 太 多 会 增加 计算 的 复杂 性 ， 因 为 约束 的 个 
数 决定 了 为 获得 基本 可 行 解 而 需要 的 基 沿 量 的 数 且 ,多 紫 ， 
吉 果 原 问 题 售 有 大昭 的 约束 ， 而 自 变量 的 个 沙 粗 对 较 少 ， 考 
证 求 解 对 偶 问题 会 在 计 算 上 带 来 好 类。 习题 和 .7 一 4-9 Ж 
8], 一 个 问题 的 碟 优 解 怎样 才能 从 关于 它 的 斗 偶 问题 注 最 优 
解 匈 知识 中 求 得 ， 


习题 与 题解 


А-1 APEE, ЗНАЯ x, 和 xs。 两 站 的 
ЖА" Iba m. рь. € f(x, хех, 2. 
表 生 成 功率 的 总 费用 ， 求 两 电站 的 功率 分 配 ， 以 使 在 供给 荆 
单位 功率 的 规定 负荷 时 ， 使 总 费用 为 最 小 。 

[ 解 ] 两 电站 切 率 箱 出 前 约 东 分 别 是 ох, xp. 和 0s 
Ya 委 pz， 这 两 个 约束 确定 了 图 AT 中 前 阴影 区 域 ， 称 为 损 
作 区 域 ， 因 为 两 站 供应 荆 单 位 的 人 负载， 我 们 有 x 十 x 二 工 ， 
ХАРА, LETEA 4-7 中 。 这 一 问题 的 可 行 域 是 
负载 线 伺 于 操作 区 域 之 内 的 那 一 线段 。 


XYimk ^ 


"Дт. 


Жл А-ТИ ЕЛ У xi，-%a) 的 等 值 线 时 ， 
ЇСх:, x MATER, 并 在 x** 二 [pr， 上 一 p11 了 "达到 最 小 什 。 
В, хе= Гр, 2—2. | ЫД Г НЕ, W 
电站 的 最 优 操 作 点 。 

А-2 ЕЗЙ А-1, ЖЮ L peak hi 的 最 优 操作 - 
я. 

[№] Ежа, МАЙЯ 用 Ка, хх, + 
2х. 内 示 。 软 为 第 一 电站 能 用 一 举 的 费用 生产 与 第 二 电站 要 
[81 020738, ИЕН СН ЭЕ „ Ж Lp tp № 
不 能 供给 负载 的 全 部 功率 要求 ， 因 而 工 的 变化 范围 м Е. 
SLSP t pe 


m А-8 


图 A-s 表示 出 了 在 区 闻 [0，pi 廿 ps] 上 三 前 三 不 未 同 
值 的 三 条 负载 线 ， 同 时 给 出 了 对 应 的 最 优 操作 点 CIE 
习题 4~-i 的 图 解法 确定 的 。 从 图 4-8 得 到 

х*—=Гр:,» 0]7, Sos Гр, 
x*—[p,, L—p1]7, М p, Гр, tp: 
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x*=[ pr» Po” M 工 一 DI 十 ps 
这 表明 优先 选 运 转 效 康 较 高 的 电站 ， 当 工 >>pr № 才 МЕ 


转 另 外 一 个 ， 
A-3 石油 精 烘 用 到 两 个 处 同 的 混合 过 程 ， 每 个 产品 种 
环 的 输入 输出 关系 给 出 如 下 
. | _ 
Ë я -- I | 
| ÆRA | жав | x 汽油 Y 
| | . 
i | 3 
2 | 2 


生 油 A. B BRAKE RR ARI вот fr „ту ЛЕН, 
至 少 30 单位 的 汽油 于 和 20 单 位 的 汽油 了 ESQ, GER 
АЕ! 和 2， 每 种 产品 循环 的 利 泗 分 别 是 1 和 2 单位 . 我 
们 希望 求 两 个 混合 过 程 的 服 优 配 合 ， 以 便 以 最 大 的 利润 供应 
汽油 市 场 。 
[М] 551, x, 分 别 代表 通过 过 程 1 和 过 程 3 的 产品 
量 。 生 油 可 利用 量 的 约束 可 写作 
3x,--2x,.-60 
2x,4-8x,«:90 
OUO ES t R R: Е 
X.1d-32,230 
2x,4J-x,2220 
汽油 销售 所 得 的 总 利润 由 f(x, x,)=xi+2z, 给 出 ,在 满 
足 上 述 约束 的 条 件 下 求 ГЕК. - 
所 有 可 行 解 的 集合 在 图 4-9 中 用 阴影 区 表示 ， nme 
РЕЗ ИИ f(x,. о) НА В, f(x. x. MME LJ, 
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ДЕ x*—[12.80, 10.7 ]*3X К, n EFE aH 的 最 
Е Н xT—12, x£—10 91H. 


x, +3x; = 30 


2x, + x; =90 


FIGURE A.9 
图 А-9 

А-4 ЖЕН M-—(xIX€ F", Axsb, x220 定义 的 可 
行 解 集 ， 证 明 M RS m, 

DE] 5х, х® 代表 型 的 任意 两 点 ， 定 六 хз =4х1 + 
(0—4A)x*, Hin од, рх 的 构造 可 知 ，xszz0， 并 
有 Ax*—AAx'4 (1— А) Ax" < Ab + (1) В =Ь. ТЕ 
x!cM, НЕМ 中 任意 两 点 的 线段 包含 在 并 rp, gilt 
щщ м EGM, 

A-5 此 集中 的 一 点 ， 如 果 它 不 能 表示 成 该 西 集 的 另外 
BACHS. HMRC GRRR A. 设计 如 习题 4-4 所 
EX, ЖЕОЕМ IR x. 

[83 Ex! CHEM IBEX ILIA, x! Ax На xi. 
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081. В xt, x*nm0. HI x32>0， 且 其 第 分 量 可 
Ем —Axit(üu—2i)xi. ПАЯ 
xi—xbe-0, ТЯ х!=х%=0, НИ, СЕМИ. 

А-6 cR f(x. w .)=8x —4x; Ж M ER Rh М 
Hi xí, w 220, X,— x. $02x,—2,-8 Ф. 

[M] 可 行 解 集 在 图 4-10 中 用 阴影 区 域 袁 示 。 图 CRISI 
时 给 出 了 等 值 线 。 这 些 等 值 线 平 行 二 由 2,7 x, 二 6 第 出 的 约 
束 超 乎 面 , 从 图 上 的 考虑 可 知 ,显然 真 线 2%i 一 xs 一 6 与 直线 
x —x, =2 082 ЫРЫНА АДА. ТЕТЕ М rh, 
xi. xl 的 值 可 以 无 限 地 增 大 而 和 且 标 浮 数值 却 不 增加 ， 
f(xi,xi)—8. 


EA 等 值 组 


B] А-10 
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A-7 求 例 А-а EE AUD PB ISIS, 
b EP А-2, ARRE д = Aab, 为 了 符合 
эй Ен, HARK Axscb, Mp 


ГЕ 741 
imn 一 2 | Е 
0 —1 TE 
fi 4-2 rR WJ вн f(x) H2, 网 而 c=[1, 21. 
Bog тах g(z)——42,—122;—22,, REA 


2—0 
—6z,d 024251 dH—2z,— 22,— 4322, A th "p VA = E 
ATzzec 的 和 形式， 
A-3 Ж] A-2 th BU P) J ЕЕЕ ЛАЙ 4-8 所 每 的 
SUR. RAE A-T 让 给 出 的 对 偶 问 总 的 最 优 解 z*。 
Г TERES ЯТ 数 ку, Н, 314220 和 v1. 92220, в. 
问题 各 对 偶 问 题 的 约束 可 以 写作 
ха, d- 044 d 004 — — 4 
— 6%, — 2, H Og, du, 084: —12 
0x, — x, + 08, 4-09; +u = 2 


以 及 
—2,.— 624,4 0243-21 +0", =! 
21—22. — 2; +00: +0. =2 


将 例 4-2 中 前 x1—2, x= 代入 原 问 题 的 约束 方程 中 ， 我 
HA 好 一 时 一 0 和 22—2, Ds 22220, Н) А-8 НИЕ Saf 
1 zf-0. 使 用 zl, im Й A-s 的 fa нац 
01=0, $f. 272, of, от EMIRA А IR] BR рр нт 
ARX, 2, Ж Я, 就 有 对 = 一 ] m 2-1. ЕЕ 
Z*-[—1, 0, —1j*, 
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作为 验证 , RT 计 R Fx) (6, хк) —xit2xi-6, 
502%) = (Ь, z*)25—42z1—122;—2:3—0, EMA 4-7 ВЕР 
断 的 ， AFO), 

A-9 求 习 题 4-3 中 所 解 的 线性 岂 划 的 对 个 问 三 的 最 优 
Е. 

[ 解 ] Я: fi, ца, ца, 8.20, ЖАА) 014099 
ЖЕТЕ 

3x t 2х, Lu, =60 

24,4-6x4-- 0, = 90 

—x— Зин. =— 30 

—2x —x,-F-u, = —20 
SERERE ELIO EE (C ЙИ Е 2) А-3 中 给 出 ， 有 sY=12.8, = 
10.7. xt, xz ERASI BE Pyari, Sul 
0.2, uf=0.2 , nf=14.9 Dl X 8116.3, [Ы иу, ni; 
"uj, s1220. НИЯ 4-8 的 结 н 21—21—23—21=0, 

ЖИК, ЕЙ 4-7 的 结果 检验 这 一 答案 。 由 = A-A 
f(x*)-—32, 3$ HX RE А g(z*)=0, ЕЎ fG*) gta), 
我 们 断定 原先 得 出 的 z* Ei 3 КОТЕ, УЖ, Я 
Дит, и; 几乎 等 上 了 0, 怀疑 是 计算 误差 ИЖ, Ха: = 
j|, um tui zb 22 ®0„ BIA» xi. x10, > Я А-8 

‚ EHE М HE pisos, {9 21, zi. vi. САХ 
"A ALS 48 [7] REL RS КЫР 
3z,4-22,—24,— z,d-v0,-—1 


22,7 62,—32,-— Z Fp. = 1 


mJ * Жора А ёт aT 1 = 2 f EN 
-FFA 21; ёз ДШ, f: #1 — + тусе ts giz*)-34.2, 


-1 
-l 


AA e) EEG SUB р fO), СИТ 


:*®=|-1-, 3s о, o] oA SR E R Rap В 
ARREA. | 


补充 题 


4-10 考虑 制定 费用 最 少 的 每 日 食谱 的 问题 。 К J H 
Pi ESSE, 每 天 的 食物 要 求 满足 成 年 人 平均 对 蛋白 质 ， 
脂肪 和 碳水 化 合 物 的 震 求 。 有 关 的 数据 在 下 疼 中 给 乌 ， 焰 此 
儿 述 为 一 个 线性 规划 问题 并 求 其 最 优 解 。 


жа hb pe = 
食物 类 型 一 一 -一 一 | 每 单位 费用 
in м | миа | € à B 
-| 一 一 MM 
1 2 1 1 
z 4 Е] 1 2 
FH 8 5 12 


А-11 cR f(xi, x,)—min[3x,—12, —4x, tE &- 
ох, < 5 КШМ, 

А-12 用 单纯 形 法 求 (9, xx, X |)=2x T 2x + 4X3 
ПШ, НИЛ IE Xxí,X,:,X 220, z, +2x + x4 460, 
3X1-4-2423€:420, Xit Axa «45D, 

А-13 ЖИ, хо) S5, Фах, 的 最 大 信 , НЕА. 
ху, XQ, 55.4 4х:2100  3x,+5x;S150, 5х Фіха 
x00, 
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